Basato sull'omonimo romanzo di Penelope Fitzgerald e ambientato nel 1959, La casa dei libri ruota attorno a Florence Green, una vedova dallo spirito libero, che decide di lasciarsi alle spalle il dolore della perdita del marito e rischia tutto per aprire una libreria - la prima nella sonnolenta cittadina costiera di Hardborough, in Inghilterra.
Lottando contro l'umidità, il freddo e l'apatia degli abitanti del luogo, stenta ad affermarsi, ma presto le cose volgeranno al meglio.