Quand il apprend que sa femme le trompe, Antoine décide de quitter le domicile familial, laissant ses trois enfants à leur mère. Antoine s'installe provisoirement chez Léo et Léa. Léo, son ami d'enfance, croit pouvoir lui remonter le moral en lui présentant d'autres femmes. Mais Antoine ne veut pas d'une relation. Ses enfants lui manquent. Sans le savoir, il est devenu un «papa du dimanche», un de ces pères qui ne voient leurs rejetons qu'un week-end sur deux. Alors qu'Antoine tente de se persuader que rien n'a changé, il se rend compte que chacun de ses enfants vit la nouvelle situation d'une manière très différente...