Для примера возьму вот такой небольшой скрипт:
Get-Service -Name "wuauserv" -ComputerName "server1", "server2", "server3" | FT -Property MachineName, Status, Name | Export-Csv -Path C:\tmp\wuausrv_status.csv -Delimiter ";" -Encoding Unicode
То в csv файле на выходе я получаю это:

А если отобразить в консоли без экспорта, то всё ок:

Это не единственный пример когда на выходе export-csv я получаю такое.
Кодировку менял, была и Unicode и UTF8 и другие - результат тот же.
PSVersion: 5.1.14409.1012