Göte flyttar in på äldreboendet Violbacken, men han har svårt att finna sig tillrätta, ända tills Siri också flyttar in. Han känner mer och mer för Siri, förälskar sig, och ser sig också ingå i det groteska spelet Frånfällingen , där de boende den sista söndagen i månaden samlas och satsar på vem av dem som härnäst står på tur till att dö. Enhetschefen Mona, som lynnigt men med fast hand styr boendet, känns bekant och Göte försöker minnas var han sett henne.
När äldreboendet ger sig av på utflykt i sin buss väljer Göte att stanna kvar hemma. Bussen krockar och Stig och Maj går för att hämta hjälp och väljer sedan att avvika. Maj, drabbad av Alzheimer, har flyttats från Stigs avdelning och tillsammans försöker de ta sig till Norges kust för att få se havet en sista gång.
Göte kommer på var han sett enhetschefen tidigare. Av en slump har han som astronomiintresserad en vinternatt råkat stöta till teleskopet och genom okularet trängt in i människors privatliv, mot Mona med en man. Göte berättar för de övriga på boendet om Monas BDSM-liknande sex och får i uppdrag att försöka fotografera henne, i akt och mening att bli av med hennes terrorstyre.
Alltid följer jag dig är en dramakomedi med två intrigströmmar som löper genom äldreboendet Violbacken. Romanen innehåller delar av komedi, fars, tragik, ensamhet och gripandet efter tillhörighet, men framförallt gestaltar den kärlek och exakt vad frånvaron av den kan göra med en människa.