Va ser la residència dels Barons de Pinós des de la fundació de la vila al 1233, tot i que ha sofert diferents modificacions al llarg del temps. Destaca al seu interior les estances que conserven pintures murals romàntiques de la última època en que va estar habitat el Palau.

El Palau era el centre senyorial de la vila , i es troba al capdamunt d’ aquesta. Actualment acull el COC –Centre Medieval i dels Càtars- i l’Oficina de Turisme. També en las seves sales es duen a terme exposicions temporals i actes culturals diversos.