Charlotte Louise Mosty Forten se narodil 17. srpna 1837 v Filadelfie Robert Mosty Forten a Mary ve Virginii Dřeva. Charlotte dědeček, James Forten, revoluční válečný veterán a úspěšný plachetník, byl jedním z nejvýznamnějších afroamerických abolicionistů ve Spojených státech. James a jeho aktivistická manželka Charlotte (Vandine) vzdělávali své děti a vnoučata ve svém domě, protože školy ve Filadelfii byly segregovány. James byl aktivním členem Americké Protiotrokářské Společnosti a jeho manželka a dcery byly zakladatelů Filadelfie Ženské Protiotrokářské Společnosti. Dům Forten na Lombard Street hostil prominentní abolicionisty jako Richard Allen, William Lloyd Garrison a Samuel J.May. Jejich děti byly básníci, pedagogové, vynálezci a podnikatelé.
Charlottina matka, Mary Virginia, zemřela, když jí byly tři roky. Její babičky a tety se staly jejími náhradními matkami. Její otec Robert se znovu oženil a Charlotte nějakou dobu žila v zemi se svou novou rodinou.
Nicméně, Robert chtěl, aby jeho dcera Charlotte vzdělávat se v integrované školy, a tak prostřednictvím smrti a rodinné poměry, ona byla poslána žít s Remond rodiny Salem, Massachusetts, kde školy byly integrovány. Nicméně, po celý život, Philadelphia byla vždy domovem Charlotte, kde byla vítána a podporována její rodinou.
její dědeček James Forten se narodil v roce 1766, čtvrté generaci Philadelphské rodiny afrického původu. Jeho otec zemřel, když mu bylo sedm, a tak pomáhal podporovat svou rodinu drobnými pracemi a získal vzdělání v africké škole. Během revoluce sloužil na americkém soukromníkovi, byl zajat a uvězněn. Po propuštění odcestoval do Londýna a pracoval v plachetnici. Po návratu do Filadelfie se vyučil u sailmakera Roberta Bridgese, který nakonec podnik převzal v roce 1798. Stal se jedním z nejbohatších mužů afrického původu v nové republice.
Forten rodina používá svůj finanční úspěch fondu otroky nákupu jejich svobody, jakož i na podporu Podzemní Železnice. James Forten byl časný společník William Lloyd Garrison noviny „Osvoboditel“ a častý komentátor pod by-line „Barevné Philadelphian,“ prosazování řady reforem, ale nikdo tak divoce, jako zrušení otroctví. Jeho žena Vandine byla také aktivistkou a jejich synové a dcery následovali v jejich stopách.
charlottin otec, dědeček a teta manžel, Robert Purvis, byli členy výbor, který vypracoval „Odvolání Jménem Čtyřicet Tisíc Disenfranchised Afrických Američanů.“Vandine a Charlotte tety Harriet, Margaretty a Sara podává na desky ženské čela skupiny a založil bezplatné soukromé školy pro Africké Americké děti v segregovaných Filadelfie.