Если речь о Nautilus (Файлы) то ищите плагин для него в файловом хранилище Canonical (можно через поиск в Synaptic найти, забив nautilus и из перечня плагинов, прочитав описание, выбрать нужный и установить).
Такой плагин есть.
После установки предпросмотр будет работать при условии, что для вашей версии Nautilus-а есть таковой.
Не помню просто название плагина...
Одни вспомнил - Globus