Особняк в переулке еще в 1816 г. перешел к дочери Эртеля – Марии Федоровне, в замужестве Белавиной (1795–1844). Как мы выяснили из «Петербургского некрополя» В. Саитова, тесть Эртеля, д.с.с. Николай Иванович Белавин, умер 16 ноября 1864 г. на 81-м году жизни, пережив свою жену на 20 лет. Похоронены супруги на Смоленском православном кладбище, так же как и жена генерал-полицмейстера Анна Григорьевна Эртель, урожденная Радыгина. На ее надгробии написано, что «родилась она 6 января 1774 года, браком сочеталась 3 ноября 1789, умерла 26 июня 1807 года. В супружестве жила 17 лет и 7 месяцев».[4]
История застройки улицы до середины 1860-х гг. прослежена по адресным книгам. Так, в «Санкт-Петербургской адресной книге» на 1809 г. мы находим сведения о владельцах уже 14 домов в Грязном переулке. В то время эти дома не имели привычной для нас нумерации, а числились в 3-й Литейной части под трехзначными номерами участков – от 247 до 257. Кто же были эти первые домовладельцы? Помимо Ф.Ф. Эртеля, владевшего участком № 251, мы встречаем в адресной книге двухсотлетней давности имена трех столярных мастеров: Христиана Варника (один из вариантов написания фамилии Вернике), которому принадлежал скромный деревянный дом на участке № 247, что примерно соответствует современному дому под № 16; Ивана Виллерса, жилище которого располагалось на участке № 255, и Ивана Коля, владельца строения на участке № 250. Заметим, что все три домовладельца, скорее всего, были немцами, так же как слесарный мастер Иван Яхман (ему принадлежал дом на участке № 278) и вдова садовника Шрама, владелица участка № 253. Кроме уже названных «аборигенов» здесь жили портной Фадей Турчанинов (участок № 278), три чиновника: коллежский советник Александр Рыков (он владел участком № 249), чиновник 5-го класса мундшенк Иван Долгов (его дом стоял на участке № 257) и камергер Александр Сергеевич Танеев (владелец участка № 273). Еще два дома числились за наследниками отставных чиновников, в начале XIX в. владевших участками № 254 (наследники Догаева) и № 256 (наследники Тванеева). Наконец, еще два участка принадлежали военным – капитану Тулубьеву (участок № 248) и майору Льву Петровичу Ханыкову (участок № 272).[5]
В это время малонаселенная улица с одно– и двухэтажными деревянными домами, напоминающими скорее деревенские избы, чем городские постройки, с огородами и хозяйственными строениями за ними, по-прежнему имела провинциальный вид, хотя и находились поблизости от центральных магистралей Литейного и Невского проспектов.