Используйте платформу PortableApps.com.
Я на ней сижу еще со времен Windows XP. Там есть и Chrome и куча другого софта, все обновляется автоматически, "как в лучших домах".
Так же стоит логиниться в Chrome с помощью своей учетной записи. Портативная версия иногда может повреждаться так, что перестает запускаться. В этом случае приходится удалять браузер и ставить по новой. Настройки, подтянутся из гугловского облака.