Billy Carter[*][[Billy Carter (American businessman (1937-1988))|]] Gloria Carter Spann[*][[Gloria Carter Spann (sister of former United States President Jimmy Carter)|]] Ruth Carter Stapleton[*][[Ruth Carter Stapleton (sister of Jimmy Carter; Christian evangelist)|]]
Jack Carter[*][[Jack Carter (American politician and businessman)|]] Amy Carter[*][[Amy Carter (daughter of United States president Jimmy Carter)|]] James Earl Carter III[*][[James Earl Carter III ((born 1950))|]][7] Jeff Carter[*][[Jeff Carter ((born 1952))|]][7]
S-a născut în 1924 în Plains(d), ca fiul cel mai mare din cei patru ai lui James Earl Carter, fermier și om de afaceri, și Bessie Lillian Gordy, asistentă medicală.
După școala elementară de la Plains, urmează Georgia Southwestern College și Georgia Institute of Technology.
În 1946, primește diploma în științe din partea United States Naval Academy.
Din 1946 până în 1953, Carter a servit în cadrul trupelor navale, fiind activ în flotele din Atlantic și Pacific. A fost promovat la gradul de sublocotenent în 1949. În 1951, a ocupat mai multe funcții de comandă, inclusiv ofițer executiv. Din martie 1953, Carter a început un curs de energie nucleară la Union College din Schenectady, cu intenția de a lucra la bordul submarinului nuclear american USS Seawolf.
Decesul subit al tatălui îl determină să se retragă pe 9 octombrie 1953 din serviciul activ pentru se ocupa de culturile de arahide din ținutul natal. Carter a mai slujit în Rezerva Marină până în 1961 și a părăsit serviciul cu gradul de locotenent.