1830 byggde Fountain Branch Carter ett tegelhus med en och en halv våning strax söder om Franklins centrum för sin lilla familj. Han och hans fru Polly fick tolv barn, varav åtta nådde vuxen ålder. Bland sönerna fanns Moscow Branch (1825), James Fountain (1831), Theodrick IV ”Tod” (1840) och Francis Watkins (1842). Döttrarna var Mary Alice (1835), Sarah Holcomb (1837), Annie Vick (1838) och Frances Hodge (1844).
Tyvärr hade Fountain framgångsrikt drivit ett företag i staden, men efter byggandet av sitt nya hem fick han möjlighet att ägna sig åt jordbruk. På bara tjugo år växte Carters gård från nitton tunnland till tvåhundraåttioåtta tunnland. Fountain lade också till en bomullsrensningsanläggning som ökade gårdens värde och produktion enormt.
Den 30 november 1864 rasade slaget vid Franklin över fälten söder om staden, vilket satte spår i landskapet, krävde tusentals människors liv och förändrade livet på Carter-gården för alltid.
För dagen gryr väckte den federala brigadgeneralen Jacob D. Cox familjen Carter, tog huset i besittning och gjorde salongen till sitt högkvarter. Striderna började vid 16-tiden i det avtagande eftermiddagssolskenet när 20 000 konfedererade attackerade ett liknande antal förskansade federala soldater. Familjen Carter, en grannfamilj och flera Carter-slavar tog sin tillflykt till det norra rummet i källaren när striden rasade runt deras hem.