Andrej Sharapov

Обычным редиректом, не?

Посмотрите здесь https://github.com/madeas/analytics/blob/master/.h...
Вам подойдет это

# убираем .html веб страниц
    RewriteCond %{REQUEST_URI} !\.[a-zA-Z0-9]{2,4}
    RewriteCond %{REQUEST_URI} !/$
    RewriteRule ^(.*)$ $1.html

только заменить html на php. Должно сработать

<FilesMatch "\.(pl|php|cgi|spl|scgi|fcgi)$">
        Header unset Cache-Control
    </FilesMatch>