Sul territorio si trovano insediamenti di epoche diverse e vi sono stati ritrovamenti di epoca romana e tardo medioevo in contrada "Gangi vecchio". Nel secolo XIV il centro attuale si sviluppò attorno al castello fatto costruire da Francesco Ventimiglia. Dopo i Ventimiglia vi furono i Graffeo e i Valguarnera. L'assetto urbao si presenta oggi con una notevole omogeneità e compattezza ed è caratterizzato dalla presenza di numerose strade incurva di concezione medievale. Nel territorio di Gangi si tronva, a circa due chilometri, Gangi vecchio, importante edificio quadrangolare che opsitò il monastero di Santa maria Annunziata, opera dei benedettini completata nel 1363 e abitata fino al 1653.