Сделайте подключение виджета ПОСЛЕ того, как Google PageSpeed загрузил страницу и дал ей оценку. Думаю, если привязаться к событию load + выждать секунду или две, то все нормально должно быть.
P. S. А еще можно сделать ленивую загрузку - вставлять виджет только если пользователь проявил какую-то активность. Например, прокрутил страницу вниз, подвигал мышкой или еще что-нибудь. Я этого не проверял, но почему-то мне кажется, что Google смотрит сайт без имитации активности.