Во-первых, известность ему могла принести известная коллекция произведений популярного Сарджента, которая в то же время очень долго собиралась основателем музея. Например, полотна Сарджента выставлены во многих музеях и большинстве художественных галерей как в США, так и в Европе, однако большая часть его работ собрана в Бостоне. Итак, во-первых, у Изабеллы в течение нескольких лет была довольно крепкая дружба непосредственно с Джоном Сингером Сарджентом. Ну и конечно, во-вторых, кроме коллекции популярного Музея Старта Гарднера, ее можно увидеть и в том же художественном музее, ну и конечно же не забыть здание публичной библиотеки.
Сама Изабелла Стюарт Гарднер, с ее довольно тонким художественным вкусом, родилась в семье весьма преуспевающего банкира из Нью-Йорка. Ее будущее в виде хорошего воспитания в этой семье было обеспечено с детства, а после того, как Изабелла подросла и пришло время замужества, особых проблем здесь не возникло, да и само замужество оказалось достаточно благоприятным для нее как весь. Ее супругом был бизнесмен Джон Гарднер, очень состоятельный человек, благодаря которому и самой миссис Гарднер удалось превратить свою яростную страсть к искусству в дело, касающееся всей ее жизни.
В коллекции преобладает большое количество довольно ценных картин многих итальянских мастеров, работавших в эпоху Возрождения. Помимо живописи, сама коллекция миссис Гарднер также стала пополняться разного рода скульптурами, рисунками, гравюрами, а также всевозможными видами прикладного искусства, а также различными тканями, стеклом, керамикой и мебелью.
После смерти отца в 1891 году Изабелла смогла унаследовать огромное состояние, находящееся в ее распоряжении. Коллекция Изабеллы, в которую она с невероятной новой силой стала вкладывать все свои финансы и свою душу, в довольно короткий срок стала становиться одной из самых распространенных художественных коллекций во всей необъятной стране. Именно поэтому через некоторое время, получив поддержку мужа, Изабелла вдруг решает построить специальное здание для своей коллекции, но, к сожалению, Изабелле Гарднер приходится строить его одной, так как в декабре 1898 года ее муж умирает. Для строительства был выбран участок земли, протянувшийся вдоль всего шоссе Фенуэй. Собственно, отсюда и пошло первоначальное название этого здания — Fenway Court.