Puede que los Carter tuvieran una hija pequeña, pero también tenían tres nueras cuando Jimmy se convirtió en presidente, y la mayor parte de la familia se mudó a Washington.
Jack y esposa Juliette “Judy” Langford Se quedaron en Georgia, donde habían acogido a su hijo. Jason James Carter el 7 de agosto de 1975, y donde su hija Sara Romero Nacería el 19 de diciembre de 1978. (Después de su divorcio, Jack se casó con una madre de dos hijos). Elizabeth Brasfield el 15 de mayo de 1992.)
El segundo hijo de los Carter, James Earl “Chip” Carter IIItrabajó para el Comité Nacional Demócrata en Washington mientras su padre estaba en el cargo y se mudó a la Casa Blanca con su esposa. Carón Grifo, que estaba embarazada de ocho meses el día de la investidura. Aun así, caminó por la ruta del desfile con el resto de la familia durante unas cuantas cuadras cuando el presidente y la primera dama tomaron la decisión sin precedentes de caminar toda la milla y media desde el Capitolio hasta el 1600 de Pennsylvania Avenue.
“La gente a lo largo de la ruta del desfile, cuando vieron que estábamos caminando, comenzaron a vitorear y a llorar”, dijo Jimmy. Más tarde escribió“Y también fue una experiencia emotiva para nosotros”.