href элемента link. То есть одними элементами с атрибутом src всё не ограничивается.
RewriteCond %{REQUEST_FILENAME} !-d # проверяем, что это не каталог
RewriteCond %{REQUEST_FILENAME}\.html -f # проверяем, что это существующий html-файл
RewriteCond %{REQUEST_URI} ^(.+)\.html$ # URI запроса заканчивается на .html
RewriteRule (.*)\.html$ /$1 [R=301,L] # перенаправление с filemame.html на filename, где filename - любое.* на список вариантов типа filename1|filename2|filename3