På platsen där herrgården ligger fanns sedan medeltiden en gård, Partille Stom. Fastigheten köptes 1773 av den nyadlade David af Sandeberg som lät riva de äldre byggnaderna och uppföra ett sommarhus åt sig och sin familj. För ritningarna stod svågern William Chambers och Göteborgs unge lovande stadsarkitekt Carl Wilhelm Carlberg. Herrgården var inflyttningsklar 1780, men det dröjde ytterligare några år innan hela anläggningen var klar. Carlberg for nämligen på några års utlandsresa i studiesyfte inför sitt kommande projekt, Gunnebo slott.

Partille herrgård bestod av den stora herrgårdsbyggnaden i klassicistisk stil med specialbeställt brunt klinkers från Holland med tillhörande två flyglar. Framför huset mot söder var en trädgård medan det norrut var en engelsk park. I östlig riktning fanns trädgårdsmästarbostad och växthus. Mangårdsbyggnaden inreddes med matsal, förmak och salong på nedre våningen, och de två övre våningarna med gott om utrymme för gäster samt allra överst ett biljardrum.

Herrgårdens ägare genom tiderna

Familjen af Sandeberg ägde fastigheten fram till 1796 då en av Göteborgs stora män, brännvinskungen Niklas Björnberg, köpte egendomen. Under hans tid var herrgården en känd plats för festligheter och umgänge. Björnberg kom dock att sluta sitt liv tämligen ensam på Partille herrgård. Hans grav vid kyrkan påminner dock om den betydelsefulla man han var för Göteborgs handelsliv.

Partille herrgård har haft åtskilda ägare genom åren, men värda att nämna är de två tyska bröderna Herman och Evald Schmidt. När de 1835 passerade herrgården var den till försäljning på exekutiv auktion och bröderna köpte den. Släkten Schmidt ägde herrgården fram till 1890-talet och under denna tid var den plats för såväl lantbruksskola som doktor Zanders gymmaskintillverkning och systrarna Zanders flickpension.

I början av 1900-talet ägdes herrgården av Göteborgs Hyrverksaktiebolag som hade vagn- och droskuthyrning. Ägaren Wincrantz donerade tre inredningar; tapeter, listverk, kakelugnar och dörromfattningar, till Röhsska slöjdmuseet 1916. Två av dessa kom att återföras under renoveringen på 1990-talet.

1922 köptes herrgården av Partille kommun, och kommunledningen, telefonväxel med mera flyttade in i herrgården som då i sann nationalromantisk anda hade börjat kallas Slottet. På 1960-talet köptes även delar av den ursprungliga fastigheten av kommunen och planerna för ett nytt, större kommunhus realiserades 1970. Partille herrgård renoverades under 1990-talet och byggnadsminnesförklarades 1995.