В том же году по проекту архитектора Р. И. Клейна на участке начали строительство трёхэтажного каменного дома в стиле позднего ренессанса. Строительство было окончено в 1893 году. Первый этаж дома занял чайный магазин Перлова, второй и третий — сдававшиеся внаём квартиры и апартаменты хозяина. Вскоре после постройки Перлов решил переделать фасад здания в китайском стиле, что было связано с планируемым приездом в Москву на коронацию Николая II чрезвычайного посла и Канцлера Китайской империи Ли Хунчжана: Сергей Васильевич рассчитывал, что сановник по прибытию остановится в его доме на Мясницкой. Для чаеторговца этот визит сулил возможность заключения новых выгодных контрактов. В жилых помещениях Сергей Перлов разместил свою богатую коллекцию китайской живописи и фарфора. Помимо магазина в доме также разместились главная контора Товарищества Перлова и чаеразвесочная фабрика. Старания купца оказались напрасными: Ли Хунчжан по прибытии в Москву поселился на Первой Мещанской улице в доме родного брата и конкурента Семёна Перлова, владельца Товарищества чайной торговли ʺВасилий Перлов с сыновьямиʺ. Тем не менее, внешний вид дома стал визитной карточкой фирмы Сергея Перлова и сыграл большую рекламную роль в его бизнесе. Фирмы братьев делали ставку на разную категорию покупателей: Семён Васильевич продавал в основном доступные массовому потребителю сорта чая, тогда как Сергей Васильевич ориентировался на состоятельную публику. Именно в магазине Сергея Васильевича впервые стали продавать чай не в картонных упаковках, а в красочно оформленных жестяных банках, а для самых богатых клиентов — в хрустальных чайницах. После октябрьской революции дом национализировали, жилые помещения стали коммунальными квартирами, однако традиции сохранились — в советские годы в доме всегда работал магазин чая и кофе (в 1920-х — 1930-х годах он назывался ʺЧаеуправлениеʺ). Несмотря на то, что здание находилось под государственной охраной как исторический памятник, за всё советское время оно ни разу не ремонтировалось капитально. К началу 1990-х годов дом пришёл в аварийное состояние: деревянные конструкции были поражены грибком, коммуникации разрушились, подвалы для хранения чая были затоплены водой, многие декоративные элементы фасада осыпались. В ходе проведённых в 2000—2011 годах реставрационных работ была восстановлена утраченная отделка фасада, торговому залу вернули позолоту, росписи на потолке и филёнках, отреставрировали предметы интерьера — витрины-щкафы, китайские фарфоровые вазы и фонари, а фасаду здания возвратили первоначальную полихромную окраску. Часть декоративной лепнины и фаянсовых изразцов изготовили в Китае.
