Joseph s´est installé dans un petit village de Bretagne après le suicide de sa femme. Or dans ce village, un drame survient, une petite fille est retrouvée violée et tuée. Joseph était fâché avec le père de la fillette, de plus la nature taciturne de Joseph en fait vite le coupable désigné auprès des villageois. Bien que la police ne retienne aucune charge contre lui, les gens continuent à l´accuser. Se sentant menacé, Joseph s´exile dans une maison sur une petite île que lui a indiquée un ami. Seuls des poneys sauvages vivent sur l´île.
A part une ou deux visites, Joseph vit totalement seul et finit par se trouver heureux ainsi. Quatre ans se passent, on vient dire à Joseph que la municipalité a vendu l´île pour en faire une base nautique. Joseph a deux mois pour partir.