John Vernou Bouvier III wurde 1891 in East Hampton, New York geboren. Sein Spitzname „Black Jack“ bezog sich auf seine ständig dunkel gebräunte Haut und seinen extravaganten Lebensstil.Bouviers Urgroßvater Michel Bouvier war ein französischer Tischler aus Pont-Saint-Esprit in der südlichen Provence. Michel wanderte 1815 nach Philadelphia aus, nachdem er in den Napoleonischen Kriegen gekämpft hatte, arbeitete für Joseph Bonaparte, heiratete, war verwitwet und heiratete dann Louise Clifford Vernou.
Neben der Herstellung feiner Möbel hatte Michel Bouvier ein Geschäft, das Brennholz verteilte. Um dieses Geschäft zu unterstützen, erwarb er große Waldflächen, von denen einige eine große Kohlereserve enthielten. Michel wuchs weiter sein Vermögen in Immobilienspekulation. Seine Söhne Eustes, Michel Charles (M.C.) und John V. Bouvier Sr. zeichneten sich in der Finanzwelt an der Wall Street aus. Sie überließen ihr Vermögen ihrem einzigen verbliebenen männlichen Bouvier-Erben, Major John Vernou Bouvier Jr., der einen Teil des Geldes verwendete, um ein Anwesen namens Lasata in East Hampton, Long Island, zu kaufen.Major John Vernou Bouvier Jr. (geboren 1866), ein erfolgreicher Anwalt, und Maude Frances Sergeant (geboren 1869) hatten fünf Kinder, von denen John Vernou Bouvier III das älteste war. Ihre anderen Kinder waren William Sergeant „Bud“ Bouvier, der 1893 geboren wurde und 1929 an Alkoholismus starb; Edith Ewing Bouvier Beale, die 1895 geboren wurde und die Frau von Phelan Beale Sr. und die Mutter von Edith Bouvier Beale, Phelan Beale Jr. und Bouvier Beale wurde; und Zwillinge Maude Reppelin Bouvier Davis und Michelle Caroline Bouvier Scott Putnam (geboren 1905).
John Vernou Bouvier III besuchte die Philips Exeter Academy und die Columbia Grammar & Vorbereitungsschule. Anschließend studierte er am Columbia College, der Alma Mater seines Vaters, wo er zwei Jahre lang Tennis spielte, bevor er an die Sheffield Scientific School der Yale University wechselte. Während seiner Zeit in Yale war er Mitglied der Book and Snake Secret Society und des Cloister Club. Er absolvierte 1914.