Годом основания Эрмитажа принято считать 1764-й, когда в Петербург привезли 225 картин, купленных у берлинского купца Гоцковского. Гоцковский усердно собирал произведения искусства для прусского короля Фридриха II. Однако Семилетняя война настолько разорила королевскую казну, что Фридрих II отказался от покупки коллекций. Их приобрела русская императрица.
Вслед за этими картинами в Петербург стали поступать новые коллекции. Русское правительство покупало их у разорившихся аристократов и монархов Западной Европы.
Вскоре несколько комнат дворца уже не могли вместить всех художественных сокровищ, и в 1767–1769 годах по проекту архитектора Деламота рядом с Зимним дворцом выстроили здание, названное по имени зодчего «Ламотов павильон», — первое специальное здание для художественных ценностей, известное позже как Малый Эрмитаж. По высоте оно примерно равно Зимнему дворцу, но построено в другом стиле. В истории русской архитектуры 60-е годы XVIII века были началом поворота к строгим линиям классицизма. Зимний дворец — последнее монументальное сооружение, которое выполнено в пышных формах барокко.
Первый этаж Ламотова павильона, предназначенный для подсобных помещений, отделан просто. Он производит впечатление подножия, цоколя для более богато оформленного верхнего этажа. Парадности и торжественности его архитектор достиг совершенно другими средствами, нежели те, которыми пользовался Растрелли. Колонн здесь гораздо меньше, и они не разбросаны вдоль фасада, как в Зимнем дворце, а образуют центральный портик, увенчанный скульптурой. Нет и обильной лепки, лишь по краям портика стоят статуи.
Малый Эрмитаж одним своим фасадом выходит на Неву, другим — на Дворцовую площадь. В XVIII столетии из внутренних комнат дворца в Эрмитаж проходили по крытому мостику, устроенному со стороны площади. Такой же переход со стороны Невы появился лишь в XX веке.
Но и Ламотов павильон через несколько лет уже не мог вместить новых коллекций картин, гравюр, рисунков, медалей, различных монет, изделий из резного камня и слоновой кости.
В 1770–1787 годах архитектор Фельтен, завершивший строительство гранитной набережной Невы, автор многих сооружений, сохранившихся в нашем городе до настоящего времени, возвел в одну линию с Эрмитажем второе здание, соединенное переходом с Ламотовым павильоном.
Впоследствии это здание стали называть Большим, или Старым, Эрмитажем. Если сравнить их, то можно увидеть, что архитектура второго Эрмитажа проще, строже и спокойнее первого. Здесь уже совсем нет колонн и статуй, только небольшие лепные вставки оживляют фасад.