Дворец Молодежи - одно из старейших зданий города Гатчины. Является образцом промышленной архитектуры конца XVIII века.

По некоторым данным изначально здание использовалось для сушки овса и называлось Каменная рига.

Как фабричный корпус здание использовалось недолго. В 1795 году в Гатчину для организации суконного производства был приглашён из Ямбурга мастер Лебург, но фабрика Лебурга проработала недолго и закрылась уже в 1802 году. Пустующее здание перешло в распоряжение дворцового управления. Император дал распоряжение разместить в здании фабрики «Покой для выздоравливающих больных городового госпиталя», предназначенный для служителей Гатчинского дворца.

В 1996 году администрацией МО «Город Гатчина» было принято решение о передаче здания под возведение будущего Дворца Молодёжи, первая очередь которого была открыта 30 апреля 1999 года.