Bu köyünde tarihçesi hakkında bir çok rivayetler söylenmektedir. Bu rivayetlerin doğruluk dereceleri tartışma götürmesine rağmen en güçlü söylenti köyün ilksahiplerinin Emir Aziz adında bir evliya ve onun sülalesinden olduğudur. Emir Aziz’in ve çocuklarının yerleşmesiyle oluşan Ayvacık Köyü Emir Aziz adını yıllar sonra yumuşayarak İmrez adını aldığı güçlü bir rivayettir.Köye şuanda bile ihtiyarlar İmrez diye söylerler Daha sonra köylerin isimlerinin değiştirilmesinde köy isminin batısında bulunan Ayvacık Dere’sinden dolayı köyün ismi şimdiki halini (Ayvacık) almıştır
              Kuzeyinde Düzkışla, batısında Kaylı, doğusunda Yazıtepe, güneyinde Ulupınar ve güneydoğusunda Çöğürlü köyleri ile komşudur. İlçe merkezine uzaklığı 15 km’ dir. Köyün haberleşmesi ve ulaşımı sağlıklı bir şekilde işlemektedir. 1941 yılı açılan bir ilkokul mevcuttur. Köyün okuma-yazma oranı %92 civarındadır. El sanatlarında kadınlar genellikle çul, kilim ve heybe dokumaktadır.
              Ekonomisi, tarım ve hayvancılıktır. Bunun yanı sıra son zamanlarda yapılan çalışmaları neticesinde meyvecilik büyük ölçüde ilerlemiştir. Hayvancılık alanında koyun, keçi ve sığır yetiştirilir.