Alice je obupana, saj jo na medenih tednih iz neznanega razloga zapusti mož. Po vrnitvi domov poskuša nadaljevati s svojim življenjem. V galeriji spozna starejšo damo, s katero se hitro spoprijateljita in ugotovita, da sta njuni življenjski poti nenavadno podobni. Alice ne ve, da je Evelyn prišla v njeno življenje z namenom; zaradi moškega, ki je bil Evelynina velika ljubezen. Bo po tem, ko se ji je sesul svet, še kdaj našla srečo, po kateri tako hrepeni?

Navdih za roman Ko si odšel je avtorica našla po prebiranju članka v New York Timesu, ki je govoril o tem, kako ima lahko opazovanje umetniških del pozitiven učinek na možgane tistih, ki trpijo za Alzheimerjevo boleznijo, in to je postal eden osrednjih motivov v romanu.