Doktor Pietro Annibale Baraing, eine der hervorragenden Persönlichkeiten von Pont-Saint-Martin, ließ es 1883 auf einem Felsen oberhalb des alten Marktfleckens erbauen.
Der Baustil ist im Geschmack der damaligen Zeit neugotisch und es ist von einem weitläufigen Garten mit Treibhäusern und Springbrunnen umgeben. Das Gebäude wurde 1893 fertiggestellt.
Im Jahr 1931 wurde es der Gemeinde Pont-Saint-Martin geschenkt, die es zum Rathaus machte. Von der Nachkriegszeit bis Anfang der 60-er Jahre beherbergte es auch die Regionale Berufsförderung.
Nachdem es jahrelang verlassen gestanden hatte, wurde es dann restauriert und ist heute Sitz der Mont Rose Montangesellschaft.