Старият град на Ксанти, разположен в северната част на града, представлява неговото историческо ядро и се простира на площ от 380 000 m². Градът е възстановен след опустошителните земетресения през 1829 г., които разрушават първоначалното селище. Построен върху руините, градът се развива около църквите си, някои от които датират от византийския Ксантия, както е бил известен Ксанти в древността. През XIX в. Ксанти процъфтява икономически, благодарение на търговията с тютюн и стратегическото си местоположение на основните търговски пътища. Старият град е лабиринт от калдъръмени улички, в които се намират балкански фолклорни къщи, гостилници, магазини, църкви от късния османски период и елегантни неокласически имения, построени от богати търговци на тютюн. Градът е построен от занаятчии от Епир и Македония и се отличава с лабиринтните си калдъръмени улички. Той е изпълнен с къщи в традиционен балкански стил, гостилници, магазини, типични църкви от късния османски период и неокласически имения със западно влияние, предимно собственост на търговци на тютюн.