Застройка кварталов можду Екатерининским каналом (ныне канал Грибоедова), Садовой улицей, Невским проспектом и Итальянской улицей началась в 1740-х годах. На месте, занимаемом ныне зданием «Пассажа», было два дворовых участка. Один из них, по Невскому проспекту, принадлежал архитектору М. Г. Земцову. На аксонометрическом плане Петербурга 1700-х годов изображены одноэтажные, на погребах, каменные палаты Земцова в девять осей по фасаду, обращенному на Невский проспект.