Как изменить иконку типов файлов в Windows?
www.nirsoft.net/utils/file_types_manager.html помог
Штатными средствами - никак, только правкой реестра.
Можно воспользоваться сторонними утилитами, например, этой:
defaultprogramseditor.com (как вам рекомендовал Константин Цветков)