В молодости Евгений Иванович служил приказчиком у немца фабриканта в Вантеевке, что около Болшева. Служил довольно долго. Когда драчливый и заносчивый немец за трактирное безобразие угодил в тюрьму, Евгений Иванович, будучи ещё молодым, купил фабрику немца с торгов. Фабрика вскоре сгорела. Он купил новую, каменную, более современную. Это была красильная фабрика, находящаяся в селе Пушкино Московской губернии.
Прямо на территории фабрики Евгений Иванович Арманд построил дом и сделал его своей резиденцией.
Вся остальная его жизнь прошла в увеличении благосостояния. У красильной фабрики появилась пара – джутовая мануфактура. Мешки и брезенты ткались и сшивались на всю губернию. Постепенно у Евгения Ивановича оказались имения: в Московской, Владимирской и Ярославской губерниях. Это были: Алёшино, Пестово, Ельдигино, Заболотье, Володькино, Рождествено и Сергейково. Там преобладали леса, пахотных угодий почти не было, сельское хозяйство не велось. Производилась только рубка леса в ограниченных размерах да охота. Евгений Иванович, очевидно, считал самым надёжным помещать деньги в недвижимость. Всего он приобрёл около десяти тысяч десятин. Кроме того, появились дома в Москве: четырёхэтажная контора на Старой площади (на углу Варварки), доходный дом на Немецком рынке (улица Баумана), торговый дом на Воздвиженке (около Арбатской площади).
Дома́ в Пушкине размножались почкованием, прирастая в линию к дому главы семьи. Число их достигало четырёх. Все они соединялись крытыми переходами.
Евгений Иванович был женат на польке – Марии Францевне Пашковской. Это была хрупкая женщина строгого и скромного нрава. Она имела привычку ходить в монашеском платье. Она была широко образованна, училась во Франции живописи и очень недурно рисовала. Во Франции она не раз писала развалины замков и очень их любила. Евгений Иванович, чтобы доставить ей удовольствие, выстроил в парке готовые руины. Местные жители верили, что там водятся привидения, и обходили их стороной.
Дочь от второго брака – Софья Ивановна – вышла замуж за шведа – Иосифа Хёкке. Откуда в Москве взялся швед, неизвестно. По слухам, он происходил от мастера кораблестроителя, выписанного Петром Первым. Вероятно, это и было так, но всё-таки дело тёмное. Так или иначе, у них тоже было трое детей: старшая – Мария Осиповна, средняя – Софья Осиповна, лет на двенадцать её моложе, и младший сын – Александр. Их родители умерли, когда старшей Марии Осиповне было всего 15 лет. Опекуном и покровителем их был назначен сводный дядя – Евгений Иванович. Он поселил детей в своей конторе на Старой площади и нанял для воспитания гувернантку.