Orașul vechi din Xanthi, situat în partea de nord a orașului, formează nucleul său istoric și se întinde pe o suprafață de 380.000 m². Orașul a fost reconstruit după cutremurele devastatoare din 1829, care au distrus așezarea inițială. Construit pe ruinele sale, orașul s-a dezvoltat în jurul bisericilor sale, dintre care unele datează din Xanthia bizantină, așa cum era cunoscut Xanthi în antichitate. În secolul al XIX-lea, Xanthi a prosperat din punct de vedere economic, susținută de comerțul cu tutun și de poziția sa strategică pe rutele comerciale majore. Orașul vechi este un labirint de alei pietruite, cu un amestec de case, hanuri și magazine balcanice folclorice, biserici din perioada otomană târzie și vile neoclasice elegante construite de negustorii bogați de tutun. Orașul a fost construit de meșteșugari din Epir și Macedonia și este caracterizat de aleile sale labirintice pietruite. Acesta este plin de case tradiționale în stil balcanic, hanuri, magazine, biserici tipice din perioada otomană târzie și conace neoclasice cu influențe occidentale, majoritatea deținute de comercianții de tutun.