Joseph och Evelyns familjer har varit grannar i den lilla kuststaden i New England i flera generationer. Och sommaren 1941, på den strand där de vuxit upp, blir de två barndomsvännerna kära.

Nu, över 60 år senare, med en hel livstid bakom sig, samlar de sina tre vuxna barn för att meddela den sorgliga nyheten: Evelyn har fått en dödlig diagnos och Joseph kan inte tänka sig ett liv utan henne. Så inom loppet av ett år kommer de att avsluta sina liv på sina egna villkor.

Medan Joseph och Evelyn tvingas förlika sig med sitt öde tänker de på allt de har delat – glädje, sorg, skratt och gråt, allt som har tagit dem till den plats där de nu befinner sig i livet. De beslutar att det kommande året ska ägnas åt att förverkliga bortglömda drömmar och skapa minnen med familjen, minnen som lever kvar när de är borta. Men saker ställs på sin spets när slutet kommer allt närmare och de tvingas konfrontera följderna av vad de är i färd med att göra och det avtryck de snart kommer att lämna efter sig.

Dagarna jag älskade dig som mest är en gripande hyllning till kärlekens kraft, även i livets mörkaste stunder.