Pajusi herrgård grundades på 1600-talet.
Herrgårdens långa huvudbyggnad i klassicistisk stil byggdes av tegel troligtvis i början av 1800-talet. Det var en envåningsbyggnad, vars mittdel hade en påbyggnad med tre fönster. Tvåvåningsdelen pryddes av en triangelformad fronton med ett segmentbågigt fönster. Förutom huvudbyggnaden hade herrgården ett stort antal ekonomibyggnader och en stor park. Intressant att veta: Av huvudbyggnaden finns just mittdelen bevarad, tillsammans med den högra husflygel som inhyser Pajusis folkets hus.