Ano, mas pravdu, psal jsem to po zpameti, takze jeste jednou a pro nazornost se tedy pridrzim TXT:

V HKEY_CLASSES_ROOT je klic .TXT a v tomto klici je vychozi hodnota TXTFILE.

Prejdu do klice TXTFILE a vytvorim hodnotu DefaultIcon a zapisu do ni cestu k me ikone napriklad "D:\Ikony\mojetextovaikona.ico"

Tohle ale ve Windows 10 nefunguje.