Le couple a vécu tantôt à Westfield, aux États-Unis, tantôt à Ste-Justine (Québec). En effet, il vivait aux États pour gagner de l'argent, et ensuite le couple revenait à Ste-Justine, car les beaux-parents d'Édouard y habitaient. Marie-Rose a aussi dit que sa mère disait qu'il était plus facile d'élever des garçons à Ste-Justine. Les trois plus vieux des enfants avant Joseph seraient morts de la grippe espagnole.
Le couple n'aurait pas eu la vie facile. Mary Chabot serait décédée peu avant ses 50 ans.