В 1730-х годах на этом участке существовал городской дом, полученный в приданое кабинет-министром императрицы Анны Иоанновны А.П.Волынским. С Затем этот участок принадлежал княгине Е.Р.Дашковой, президенту Российской Академии наук, а от нее перешел к Воронцовым. Для Дашковой в 1770-80-х годах на этом месте (возможно, по проекту знаменитого архитектора В.И.Баженова) была построена городская усадьба. На улицу здание выходило боковыми флигелями, не связанными с главным зданием. В композиции главного двухэтажного дома выделялась полуротонда, окруженная колоннадой в центре фасада. В 1871 году М.С.Воронцов продал неоднократно к тому времени перестраивавшийся дом, и в нем разместилась только что основанная тогда Московская консерватория. В 1894-1901 годах здание было почти полностью разобрано для сооружения нового, в состав которого вошли фасадная стена прежнего дома с полуротондой и стены правого флигеля (архитектор В.П.Загорский, скульптор А.А.Аладьин). Здание выполнено в классических формах. Особенно эффектен вестибюль в стиле греческой дорики. Новое здание строилось и оборудовалось на пожертвования музыкальной общественности и богатых промышленников-меломанов. В нем разместились учебные помещения и концертные залы (Большой на почти 2 тыс. слушателей и Малый — на 444 места). В Большом зале находится один из крупнейших в мире органов (фирма «А.Кавайе-Колль в Париже»), на его сцене могут разместиться оркестр из 130 музыкантов и хор в 250 человек. Зал, предназначенный для проведения симфонических концертов, а также хоровых, органных и камерных вечеров, отличается великолепной акустикой благодаря системе пустотелых керамических емкостей, вмонтированных в свод. Его стены украшены 14 портретами-медальонами классиков русской и западноевропейской музыки. Медальон с портретом Н.Г.Рубинштейна, основателя Московской консерватории, размещен над сценой. В 1912 году в консерватории открылся первый музыкальный музей имени Н. Рубинштейна. В 1940 году Московской государственной консерватории было присвоено имя П.И.Чайковского и перед зданием был установлен памятник композитору (скульптор В.Мухина ). В 1957 году правый корпус перестроен для размещения учебных помещений и «Белого» концертного зала. В 1983 году к консерватории отошел расположенный рядом дом Колычевых (д. № 11) — одно из красивейших зданий московского классицизма конца XVIII века.