Дворец Алфераки является самым красивым зданием Таганрога. Он построен в 1848 году купцом Николаем Алфераки. Дворец построен в стиле необарокко, который пришел на смену строгим чертам классицизма. Архитектурные формы вновь стали пышными, а на фасаде появился декор, как на дворцах 18 века.
Николай Алфераки был не только успешным купцом в Таганроге, но и несколько лет занимал должность главы города. Строительство своего дворца он поручил архитектору Андрею Штакеншнайдеру. Современники отмечали, что архитектурный стиль дворца напоминает здания Парижа, где необарокко получило широкое распространение. Николай Алфераки давал роскошные балы в своем дворце, где собиралось все высшее общество Таганрога. Умер он в 1860 году, в возрасте 45 лет.
Во второй половине 19 века во дворце Алфераки проводились концерты, затем здесь располагалась Городская администрация. В 1927 году Дворец Алфераки передали местному Историко-Краеведческому Музею. Этот музей создан в 1898 году по инициативе Антона Чехова.
Он обратился к своему другу Илье Репину с просьбой о помощи в создании Художественного музея. Одновременно с этим началось формирование коллекции историко-краеведческого музея. Вначале коллекции обоих музеев размещались во дворце Алфераки, но с 1970 году Художественный музей переехал в особняк купца Антона Хандрина на улице Александровская. Экспозиция историко-краеведческого музея осталась во Дворце Алфераки.
Кроме экспозиции Историко-краеведческого музея большой интерес представляют интерьеры дворца. Они сохранились в оригинальном виде. На входе можно видеть большую мраморную лестницу с 41 ступенью. С лестницы через арку посетители входят в Парадный Зал. Он сделан в стиле роскошных французских апартаментов эпохи Людовика 15. Потолок расписан фресками на темы из жизни версальского дворца. Орнамент зала оформлен в стиле французского рококо. Во дворце Алфераки есть еще один большой зал. В нем проводятся камерные концерты.
Большой интерес представляет историческая экспозиция музея во дворце Алфераки. В нескольких залах находятся артефакты, найденные во время археологических раскопок в степях Дона и Днепра. Здесь есть находки относящиеся и к эпохе палеолита, и ко времени греческой колонизации Азовского и Черного моря.
Отдельная экспозиция посвящена времени правления Петра I. В 1698 году он основал Таганрог и под защитой Азовской крепости начал развивать торговлю на Черном море. Не меньший интерес представляет экспозиция, посвященная императору Александру I и его трагической смерти в Таганроге в 1825 году. В Таганроге есть Дворец Александра I, где умер царь. В 19 веке там находился музей, но сейчас в нем размещается детский санаторий. Некоторые экспонаты того музея можно увидеть здесь.