Da Karen Wright vender hjem til sit barndomshjem, for at pleje sin svagelige far, er det med et tungt hjerte. Huset er stadig hjemsĂžgt af fortidens spĂžgelser, hendes fars lukkethed og hemmelighedskrĂŠmmeriet om baggrunden for hendes smukke mor Elizabeths dĂžd, som indtraf under tragiske omstĂŠndigheder Ă„r forinden.
Under oprydning stÞder hun pÄ nogle falmende fotografier, samt et laset kÊrlighedsbrev poststemplet i Tyskland fÞr krigen, adresseret til hendes mor fra en ukendt afsender. Karen har altid kÊmpet for at forstÄ sin generte og Êngstelige mor, men indser nu, at hun kun kender halvdelen af historien. For det fÞrste, hedder hendes mor ikke engang Elizabeth og hendes grufulde historie begynder lÊnge fÞr Karen var fÞdt. Den starter i 1941, i det besatte Berlin, hvor en ung kvinde ved navn Liese tvinges til at bÊre den gule stjerne.
Det ved kun vi er en smuk og gribende krigshistorie om familiehemmeligheder og de umulige valg, som vi mÄ trÊffe under frygtelige omstÊndigheder.