However, their relationship seems to be terrible that Goemon stole Tanba's wife, killed Tanba's beloved concubine, tempted by the wife.
しかし、その五右衛門には妻を奪われたうえ、その妻にそそのかされた五右衛門によって愛妾を殺害されるなど、散々な関係にあったと言われている。