シャーロット・ルイーズ・ブリッジス・フォーテンは、1837年8月17日にフィラデルフィアで、ロバート・ブリッジス・フォーテンとメアリー・ヴァージニア・ウッドの間に生まれた。 シャーロットの祖父ジェイムズ・フォーテンは、独立戦争の退役軍人で成功した帆工であり、アメリカ合衆国で最も著名なアフリカ系アメリカ人奴隷廃止論者の一人であった。 ジェームズと彼の活動家の妻シャーロット（ヴァンダイン）は、フィラデルフィアの学校が分離されたので、彼らの家で子供や孫を教育しました。 ジェームズはアメリカ反奴隷制協会の活動的なメンバーであり、彼の妻と娘はフィラデルフィア女性反奴隷制協会の創設者であった。 ロンバード通りのフォーテン・ハウスには、リチャード・アレン、ウィリアム・ロイド・ギャリソン、サミュエル・J・メイなどの著名な奴隷制度廃止論者がいた。 彼らの子供たちは詩人、教育者、発明家、起業家でした。
シャーロットの母メアリー-ヴァージニアは、彼女が三歳の時に死亡した。 彼女の祖母と叔母は彼女の代理母になった。 彼女の父ロバートは再婚し、しばらくの間、シャーロットは彼の新しい家族と一緒に国に住んでいました。
しかし、ロバートは娘のシャーロットに統合された学校で教育を受けることを望んでいたため、廃止主義者と家族のつながりを通じて、学校が統合されたマサチューセッツ州セーラムのレモンド家と一緒に暮らすために送られた。 しかし、彼女の人生を通して、フィラデルフィアは常にシャーロットのために家であり、彼女は家族に歓迎され、支えられ
彼女の祖父ジェームズ-フォーテンは1766年、アフリカ系フィラデルフィアの家族の第四世代に生まれました。 彼の父親は7歳の時に亡くなったので、彼は奇妙な仕事で彼の家族を支援し、アフリカの学校で教育を受けました。 革命の間、彼はアメリカの私掠船に仕え、捕獲され、投獄された。 解放されると、彼はロンドンに旅行し、セイルロフトで働いた。 フィラデルフィアに戻って帆工のロバート-ブリッジスの下で見習い、1798年に事業を引き継いだ。 彼は新しい共和国でアフリカ系の最も裕福な男性の一人となった。
フォルテン家は、自由を買う奴隷に資金を提供し、地下鉄道を支援するために、彼らの経済的成功を利用した。 ジェイムズ・フォーテンはウィリアム・ロイド・ギャリソンの新聞「解放者」の初期の支持者であり、「色のあるフィラデルフィア」という副題の下で頻繁にコラムニストを務め、多くの改革を推進したが、奴隷制度の廃止ほど激しくはなかった。 彼の妻ヴァンダインも活動家であり、彼らの息子や娘たちが彼らの足跡をたどった。
シャーロットの父、祖父、叔母の夫ロバート・パーヴィスは、「アフリカ系アメリカ人4万人を代表して上訴」を起草した委員会のメンバーであった。”ヴァンダインとシャーロットの叔母ハリエット、マーガレッタとサラは、女性奴隷廃止運動家グループのボードに務め、分離フィラデルフィアでアフリカ系アメリカ人の子供のための無料の私立学校を設立しました。