Ο Jimmy Carter γνώριζε την Eleanor Rosalynn Smith ουσιαστικά από την ημέρα που γεννήθηκε. Στις 18 Αυγούστου 1927, η μητέρα του Jimmy, η Lillian Carter, νοσηλεύτρια, βοήθησε στη γέννα του μεγαλύτερου μωρού της γειτόνισσάς της Frances «Allie» Smith, της Eleanor Rosalynn. Την επόμενη μέρα, έφερε τον 3χρονο γιο της Jimmy για να γνωρίσει τη νέα του γειτόνισσα.
Θα περάσουν πολλά χρόνια μέχρι να αρχίσουν να βγαίνουν ραντεβού το 1945, όταν ο Jimmy βρισκόταν στο σπίτι του στο Plains κατά τη διάρκεια των καλοκαιρινών διακοπών πριν από το τελευταίο έτος σπουδών του στη Ναυτική Ακαδημία των ΗΠΑ. Η μικρότερη αδελφή του Jimmy, η Ruth, ήταν φίλη με τη Rosalynn. Όπως θα διηγούνταν αργότερα η Rosalynn, «η Ruth και εγώ προσπαθούσαμε να καταφέρουμε να βγω μαζί του».
Εκείνη είπε «όχι»
Ένα βράδυ του Ιουλίου, ο Jimmy εντόπισε τη Rosalynn έξω από την United Methodist Church και της ζήτησε να βγούμε ραντεβού. Εκείνο το βράδυ, πήγαν σε μια ταινία. «Το φεγγάρι ήταν γεμάτο στον ουρανό, η συζήτηση ήταν εύκολη και ξαφνικά ήμουν ερωτευμένη», θα έγραφε αργότερα η Rosalynn στο First Lady from Plains, τα απομνημονεύματά της.