Имя замка Каса Лома (Casa Loma) в переводе с испанского означает Дом на холме.

В 1911 году по заказу Генри Пеллота Е.Дж. Леннокс создал проект четырехэтажного замка с 96 комнатами. Строительство продолжалось до 1915 года. На постройку было потрачено около 3,5 миллионов канадских долларов, еще столько же ушло на приобретение обстановки.

В 1933 году после того как замок был заброшен, власти города наконец-то решились им заняться. И в 1937 году Касса Лома был открыт как музей.

На первом этаже имеются помещения для проведения торжественных мероприятий, а в верхних располагаются экспозиции, посвященные как жизни Генри Пеллота и его жены (прикованная к инвалидной коляске она активно занималась общественной деятельностью), так и истории Торонто в целом.