In 1830 bouwde Fountain Branch Carter ten zuiden van het centrum van Franklin een bakstenen huis van anderhalve verdieping voor zijn kleine gezin. Hij en zijn vrouw Polly kregen twaalf kinderen, van wie er acht volwassen werden. Tot de zonen behoorden Moscow Branch (1825), James Fountain (1831), Theodrick IV “Tod” (1840), en Francis Watkins (1842). De dochters waren Mary Alice (1835), Sarah Holcomb (1837), Annie Vick (1838), en Frances Hodge (1844).
Hoewel Fountain met succes een zaak in de stad had gerund, kreeg hij na de bouw van zijn nieuwe huis de gelegenheid om zich op het boerenbedrijf toe te leggen. In slechts twintig jaar groeide de boerderij van Carter van negentien hectare tot tweehonderdtachtig hectare. Op 30 november 1864 woedde de Slag om Franklin in de velden ten zuiden van de stad, waarbij het landschap littekens opliep, duizenden mensen omkwamen en het leven op de boerderij van Carter voorgoed veranderde.
Voor zonsopgang wekte de federale Brig. Gen. Jacob D. Cox de familie Carter, nam bezit van het huis en maakte van de zitkamer zijn hoofdkwartier. De gevechten begonnen om 16.00 uur in het afnemende middagzonlicht toen 20.000 Geconfedereerden een vergelijkbaar aantal verschanste Federalen aanvielen. De familie Carter, een naburig gezin en verschillende slaven van Carter zochten hun toevlucht in de noordelijke kamer van de kelder terwijl de strijd rond hun huis woedde.