Ville-Marie est la plus ancienne municipalité de l'Abitibi-Témiscamingue. Son histoire est intimement liée à celle d'une personne : le frère Joseph Moffet. Ce missionnaire oblat est arrivé à la mission Saint-Claude, sur le bord du lac Témiscamingue, en 1872. En 1874, il entreprend de défricher et de cultiver secrètement une terre à cinq kilomètres au nord de la mission, dans le secteur de l'actuelle Ville-Marie. Devant le succès de son entreprise, il obtient quelques années plus tard l'autorisation de ses supérieurs d'y établir une ferme. Ainsi, une habitation est construite en 1881 et une grange l'année suivante. Un peu plus tard, des familles viennent s'installer autour de la ferme. Ville-Marie est fondée.

La maison du Frère-Moffet est une des plus vieilles maisons qui subsistent encore en Abitibi-Témiscamingue. Cette modeste demeure en bois, de 6 mètres sur 6, assemblée à queue d'aronde, est un témoin unique des tout premiers efforts de colonisation. La maison du Frère-Moffet fut classée monument historique par le gouvernement du Québec en 1978.