Petit château établi sur une motte castrale à la fin du Xe siècle, Roussillon s'est développé à partir du XVIIIe siècle grâce à l'exploitation ocrière. Le bourg s'est alors entouré de carrières et d'usines d'ocre qui ont employé un millier de personnes jusqu'en 1930 avant que les moyens plus modernes d'extraction et la découverte de gisements plus rentables ne conduisent à la fermeture progressive de toutes les mines. Depuis la fin du XXe siècle, le tourisme a remplacé l'industrie ocrière.