Да, это и в винде просто часть имени. Можно переименовать любой файл как вам угодно, с другим расширением, или вообще без него, и все равно в большинстве случаев его можно будет открыть через "открыть с помощью", или через меню "файл-открыть", или просто перетащив на иконку программы, или еще как-нибудь.
Но в винде "из коробки" гораздо больше "магии" завязано на расширение. И началось это еще во времена DOS, если не раньше. Какие именно подробности вас интересуют? Начать можно
отсюда.