This is the reason of the taboo: Don't wear pongee on formal occasions even though it is made of silk; people often wear pongee when they go out and when they need to be dressed up, and they might wear it on semi-formal occasions these days.
このことから材質が絹であっても正装に用いてはならないとされ、外出着若しくはお洒落着として用いられることが多いが、近年では略正装程度であれば用いる場合がある。