I den lille bysamfunnet Puritan New England fremstår Reverend Nathaniel Whitfield og hans familie som gudfryktige søyler. Bak denne fasaden av fromhet oppstår en uventet og dyp forbindelse mellom presten og hans tilhenger, Dr. Arthur Lyman, som finner en kjærlighet i ministerens ord som overgår språket. Etter hvert som forholdet mellom de to mennene blir mer og mer intenst, tvinges deres koner og barn til å navigere gjennom et komplekst nett av hemmeligheter, løgner og dømminger som truer med å ødelegge dem, både i denne verden og den neste. I en periode preget av turbulente historiske omveltninger avdekker 'All the World Beside' de menneskelige livene som skjuler seg bak dogmatisk tro, og belyser kampene og prøvelsene som følger når kjærlighet og samfunnsnormer kolliderer.