Илья Мясин

Массово - кажется нигде такого формата нет, да и работать не будет, если массово. Так что выбирайте площадки, которые нравятся, и руками договаривайтесь как в старые добрые времена :) у меня например есть площадка, с которой я продавал такой баннер, потом рекл отвалился, а нового искать лень, но если бы предложили - я бы обсудил ))

1)

User-Agent: *
Disallow: /wp-content/

Это если в папке wp-content нету ничего, что вы хотите индексировать (например, какие-нибудь PDF).

2) Настройте сервер, чтобы он не показывал индексы директорий.

Для nginx см. autoindex
Для apache см. DirectoryIndex