Zemītes muižas pirmais zināmais īpašnieks bijis “Garais Klauss”, kurš 15. gs. pirmajā pusē minēts kā Zemītes lēņa mantinieks. Uzskata, ka tagadējā pils jeb kungu māja būvēta ap 1850. gadu, kad ap to izveidots arī parks. Neskatoties uz ugunsgrēku postījumiem, sākotnējie pils galvenie apjomi pamatos saglabājušies. Šobrīd Zemītes pilī atrodas pamatskola.