В середине 19 века этот дом имел совсем другой облик, нежели сегодня - тогда это была традиционная для своего времени усадьба в стиле классицизм, принадлежавшая тайному советнику Греффу. Усадьба занимала весь квартал, дом с мезонином выходил фасадом на Большую Пушкарскую, а во внутреннем дворике был разбит сад. Позже со стороны сада пристроили деревянное крыльцо.

Следующей владелицей дома стала супруга медика Добберта. Под ее руководством особняк был радикально перестроен - мезонин убрали, зато появилась башня с коваными ажурным наконечником в виде паука и цветов и эркер.

Здание сейчас принадлежит Академии танца имени Бориса Эйфмана, но пока не используется. В будущем Академия планирует разместить здесь свой музей.