Sur la place publique de Boston, les honorables paroissiens estiment qu'il aurait fallu, au moins, marquer le front d'Hester Prynne au fer rouge. Au lieu de quoi, elle ne portera sur sa poitrine qu'une lettre écarlate, afin de rappeler à tous son crime odieux : l'adultère et le bébé qui en est né.
Dans la Nouvelle-Angleterre du XVIIe siècle, forgée par le puritanisme, la jeune femme est mise au ban de la société. Mais l'humiliation publique n'est qu'un aspect de la peine : la colère du mari trahi et la culpabilité qui ronge le père de l'enfant vont se révéler des poisons bien plus terribles.