Avec ses villes voisines Wabush et Labrador City au Labrador, Fermont fait partie de la fosse du Labrador. Le secteur Mont-Wright est doté d'un vaste centre minier d'où l'on extrait le minerai de fer, d'où le nom de Fermont. La ville se démarque par son édifice principal, la place Daviault communément appelée « Le Mur ». Il regroupe les principaux commerces et services de la ville en plus d'abriter un bon nombre de logements. Il comprend notamment une épicerie, un bureau de poste, des écoles primaire et secondaire, un hôtel et diverses installations sportives. L'édifice mesure de long et de haut. Son surnom n'est pas du hasard, car l'édifice sert réellement de mur protégeant la ville contre les forts vents en provenance du nord. Il a aussi pour but de permettre à ses résidents de participer à un milieu de vie intégrant un ensemble d'activités et de services sans avoir à quitter le bâtiment en hiver. Outre ce légendaire mur-écran, la ville est dotée de nombreuses maisons individuelles ou en rangées dans la zone au sud et au sud-ouest du mur-écran. Le village couvre une pointe de la partie nord du lac Daviault.