Benjamin Button kommer til verden i New Orleans i 1918, midt under festlighederne efter afslutningen på Første Verdenskrig. Da han bliver født, ligner han en gammel indskrumpet mand på 80 år. Benjamin Buttons mor dør under fødslen, og hans far vil ikke kendes ved vanskabningen, så han efterlader barnet på dørtrinnet til et alderdomshjem, hvor det bliver fundet af den sorte kvinde Queenie, der opfostrer Benjamin, som var hun hans eget barn. Årene går, og mens alle andre omkring ham bliver ældre og dør, bliver Benjamin bare yngre. Efter nogle år beslutter han sig for at tage ud i verden for at opleve livet. Det bliver en usædvanlig, forunderlig rejse.