Старый город Ксанфи расположен в северной части современного Ксанфи. Это его историческое ядро, которое занимает площадь 380 000 квадратных метров.
Город был построен после 1829 года, когда сильнейшее землетрясение сравняло с землей бывшее поселение. Город был построен на развалинах едва уцелевших церквей, оставшихся с византийской эпохи «Хантии», именно так назывался этот город в древние времена.
В течение 19 века Ксанфи - это небольшой город, с населением около 8 000 граждан. Но благодаря выращиванию, переработки , производству и распространению табака и табачной продукции, он весьма экономически развит. На его процветание так же повлияло выгодное расположение вблизи с торговыми путями.
Город был построен эпирскими и македонскими мастерами, с характерными лабиринтами мощеных улиц и переулков, полных традиционными балканскими домами, гостиницами, магазинчиками, церквями типичными для последнего периода османского владычества, а так же особняками западного неоклассического стиля, владельцами которых, в основном, были торговцы табаком.