Personne n'ignore que Grand-Charmont est et était célèbre pour ses bois. Même aujourd'hui, si vous voulez vous rendre, à pied, à Bethoncourt ou à Chatenois-les-Forges, il vous faut traverser un pan de fôret. Alors imaginez la cité autour des années 1700. Imaginez son étendue et son épaisseur et, à cette époque, qui pense forêt dit gibier et chasse. C'est sans doute pourquoi on trouve un pavillon de chasse à Grand-Charmont, maison ceinturée d'un mur de pierres sèches. Cette demeure subsiste encore en retrait, derrière le temple et de ses lignes sobres se dégage un charme indéfinissable et prenant. La maison s'est flanquée d'une ferme elle-même devenue habitation après guerre. Le mur, de pierres sèches, est encore debout (passage de la Gossote) bien qu'un peu effondré à certains endroits et recouvert de crépi à d'autres.

A un moment de son histoire, le pavillon a pris le nom de "maison du bailli" car un fonctionnaire des seigneurs y collectait l'impôt. Dans l'épais mur intérieur, il existe encore 2 caches pour les espèces sonnantes et trébuchantes (véritable coffres forts). Les grains étaient remisés au grenier. Les impôts acquittés en nature, étaient eux stockés dans une superbe cave voutée qui au 16ème siècle avait servi à accrocher et conserver le gibier.