Hester Collyer lever ett priviligierat liv i 1950-talets London med sin make Sir William Collyer, en respekterad domare. Deras tillvaro förändras drastiskt när hon förälskar sig i en annan man och bestämmer sig för att följa sitt hjärta. Hester lämnar sitt äktenskap och flyttar in hos den före detta stridspiloten Freddie Page till omgivningens stora förvåning.