Вам никто не мешает заранее подгружать динамически линкуемые куски кода.
Заранее, еще до того как понадобится их фактическое использование.
А вообще - есть такой термин "профилирование"
Запустите профайлинг и посмотрите - а где реально у вас тормоза.
Может быть это вовсе не на линковке (очень сомнительно, чтобы виной была линковка),
а, скажем, при подключении к каким то внешним сервисам (БД и т.п.)