Если приложение написано с испольованием ресурсов (MFC), то можно воспользоваться каким-нибудь редактором ресурсов (например
PE Explorer) и поправить диалог, как надо.
Если на .NET, то есть
такой подход.
Если оно написано на чистом и незамутнённом Win API, то кроме как лазить по exe-шнику дизассемблером (или на крайний случай 16-ти ричным редактором) и искать размеры и позиции контролов, которые предварительно вытащить с помощью Spy++, больше ничего не остаётся.
