Изабела Стюарт е родена в Ню Йорк през 1840.Баща  е направил много пари в trade.So school, родителите  са я завели в Италия, за да изследват многото културни съкровища на страната. Една от частните художествени колекции, които Изабела е посетила в Милано, е имала дълбоко влияние върху нея.Тя е писала на приятелите си за мечтата си да притежава къща един ден с художествена колекция като тази, която е видяла в Италия.
Изабела и Джак са били съученици, когато са учили в Париж. Музеите по това време не са били удобни. Изабела отваря музея около пет години след смъртта на Джак. Колкото и голям да е бил музеят, посетителите е трябвало да чакат и да плащат, за да влязат.