Da ægteskabet mellem fiskeren Magnús og billedkunstneren Anna går i stykker, må de og deres tre børn finde fodfæste i en ny hverdag. Med humor og nærvær portrætterer The Love that Remains en familie, der skifter form, og de mange minder, der stadig binder dem sammen.