Joe Chandler (Casey Affleck) mister broren sin brått, og må vende tilbake til den lille hjembyen Manchester i Massachusetts. Der får han vite at han mot sin vilje er oppnevnt til verge for brorens tenåringssønn. Han må også ta et oppgjør med egne demoner fra fortiden, ikke minst den grufulle hendelsen som rammet ham og hans tidligere kone, Randi (Michelle Williams), noen år i forkant.