Очистить думаю можно без проблем. Можете почитать доки
nginx.org/ru/docs/http/ngx_http_proxy_module.html#...
ссылка криво работает ctrl+f -> proxy_cache_purge . Так же, что бы не забился опять нужно отрегулировать размер в конфигах ctrl+f -> proxy_cache_path параметр max_size
