La denominación hace referencia al castillo y a la villa de Albi, actual municipio de la provincia de Lérida.
El título pasó a la Casa de Centelles y, a mediados del siglo XIV, a la Casa de Mur.
De dicha casa destacó el barón Acard de Mur y Alemany de Cervelló, capitán general del Reino de Cerdeña en 1413.
Durante la Guerra Civil Catalana (1462–1472), el rey Juan II de Aragón le confisca a Hugo de Cardona y de Perelló la baronía de Bellpuig, pero logra mantener la baronía de Albi, la cual pasará a sus descendientes: los Erill, Desplá y Cartellá.
[1] El título pasa, después, a sus descendientes: los Darnius, Rocabruna y Montoliu.