Une dizaine de moulins s'égrenaient autrefois sur les deux rives du Tarn mais seulement quatre subsistèrent après la révolution : les moulins de Gardès, de Lamothe, du Chapitre et le Moulin Neuf appelé par la suite Moulin de l'Albigeois.
Le Moulin Neuf fût transformé au 18ème et 19ème siècle et devînt, après 1828, le siège d'une minoterie, puis d'une vermicellerie en 1845. Ce fût le premier exemple de coopérative moderne de la région du Midi.
Cependant, après avoir connu une période florissante, la société des Moulins Albigeois cessa toute activité dans les années 1970.
Ayant bénéficié d'une réhabilitation en 1986, ces bâtiments abritent aujourd'hui le Musée Lapérouse, un hôtel, des logements, les services du Conseil Général du Tarn et un centre d'art contemporain le L.A.I.T.
Le site des Moulins Albigeois est situé au bord du Tarn, entre le Pont Neuf et le Pont Vieux, et offre une des plus belles vues de la Cité Episcopale d'Albi, inscrite au patrimoine mondial de l'UNESCO.