Antik yerleşim yeri olan Tabea şehrinin üzerine kurulmuş olan fakat bu şehir de daha sonra 1950'li yılların başında yaşayan halkı tarafından terkedilerek şehrin birkaç kilometre kuzeyine taşınmıştır.

Tabea antik kenti tarihi Afrodisias kentiyle komşu bir şehirdir. Karya bölgesinin Frigya sınırındaki en önemli şehirlerinden biri olup Büyük İskender`in fethederek geçtiği kentlerdendir. Anodolu tarihi açısından da çok ilginç bir yerdir. Tabea da tarihten bugüne dek kesintisiz yerleşim olmuş ve bugün her kültürden kalma eserleri görmek mümkündür. Karya döneminden kalma mermertaş üzerindeki yazıtlar, Büyük İskender`den sonra kurulan kent devlete ait gümüş ve bronz sikkeler, Roma Hamamı, Bizans dönemi kalıntıları, şuan sadece minaresi ayakta olan Selçuklu dönemine ait camiii, 18. yy Osmanlı Dönemine ait Cevherpaşa Camii, Ege Üniversitesi Prof. Dr. Bozkurt Ersoy'un Kazı başkanlığını yaptığı ekip tarafından restore edilmiştir.İlçe merkezi Osmanlı döneminde Kale-Davaz olarak anılmaktadır. Şu andaki Tavas ilçesini de içine alan bu birim daha sonra Kale ve Tavas'ın ayrışmasıyla farklı adlarla anılmaya başlanmıştır. Bugünkü Tavas ilçesi tarihi Kale-Davaz beldesine bağlı Yarengüme adlı kasabanın bu ismi almasıyla kurulmuştur. Osmanlı döneminde kuzey-güney hattında Kütahya ile Muğla arasındaki ticaret yollarının kilit noktası olarak önem kazanmış ve doğal kale görünümündeki yerleşim yeri güvenli bir alan olarak idari merkez işlevi de görmüştür.

Türkmen yörük kültürünün ilginç folklorik özelliklerine hala rastlamak mümkündür. Bu açıdan Zeybek kültürünün de önemli alanlarındandır. Davas Zeybeği Kale ilçesinin yöresel oyunlarındandır. Davaz Zeybeği günümüzde Tavas Zeybeği olarak çıksada asıl adı Davaz Zeybeğidir.Çürüksu Vadisi ile Aydın Ovası'na aynı hat üzerinden bağlanabilen verimli bir ovaya hakim bir yerleşim birimidir.Kale 1950 sonrası ilçenin ekonomik ve sosyal hayatını etkileyen dramatik bir göç eğrisine sahiptir.