История дома-дворца-музея на улице Греческой 40 в Таганроге начинается в 1811 году и начинается она с банальной аферы.
Сотник Семен Николаев купил небольшой участок земли с развалиной для того, чтобы построить на нем дом и продать с выгодой для себя. А когда стало известно, что в Таганрог прибывает новый градоначальник, то Николаев решил продать дом ему. Но генерал-майор Петр Афанасьевич Папков просто присвоил этот дом себе (говоря современным языком, попросту «кинул» предприимчивого сотника). Сделав в доме небольшой ремонт и кое-какую перестройку , градоначальник продал городу, но уже за большие деньги (52 тыс. руб.). Городские власти вначале не знали, что делать с этой, практически насильно навязанной им покупкой. Но поразмыслив, решили, что в доме можно разместить временную резиденцию для высокопоставленных лиц, приезжающих в город. А их по дороге в Крым в городе останавливалось не мало.