Усадьба первоначально принадлежала фабрикантам Плавильщиковым, у которых она была куплена в 1839 году Елисеем Саввичем Морозовым, представителем известной купеческой династии.