Если всё разное и они не связаны, то да, пробуй или через JS, не думаю, что долго будет грузить, то есть в одном месте он у тебя будет и запрашивай по прямой ссылке откуда хочешь, либо опять же на одном сайте, допустим example.com
размещаешь footer.html, где пишешь только сам кусок, а где надо подключать делаешь это через include "http://example.com/footer.html"
В таком случае можешь его даже разместить где-нибудь на Github или Dropbox.