Butler był żonaty przez 65 lat, wychował pięcioro dzieci, służył w wojsku podczas drugiej wojny światowej, pracował w wydziale ds. zasobów wodnych we władzach miasta Beverly. Jego synowa Cathy Butler powiedziała, że zawsze żałował, iż musiał porzucić szkołę. Swoim dzieciom i wnukom powtarzał, jak wielkie znaczenie ma edukacja. Honorowy dyplom ukończenia szkoły wręczono Butlerowi, najstarszemu mieszkańcowi Beverly, podczas specjalnej uroczystości. Butler, który odebrał go drżącymi rękami, gorąco podziękował "wszystkim, którzy się do tego przyczynili".