Ты вообще документацию читал? Хотя бы
страницу пакета на pypi? Там полно примеров, в том числе с иконкой, тайтлом, действием по клику, кнопками и т.д.
Или ты про имя и иконку приложения, которое открыло уведомление?
Тогда не удивлюсь, если никак, потому что пользователь должен знать какая сволочь спамит на рабочий стол.
Разве что упаковывать скрипт в exe с кастомной иконкой и названием.