The Japanese kanji for "yo" (黄) in "Yomi" (黄泉) symbolizes earth in the concept of the five elements and was used when describing things that were underground.
黄は、五行思想で、土を表象しており、それゆえに、地下を指すために黄という文字を使ったのである。