Va ser la residència dels Barons de Pinós des de la fundació de la vila al 1233, tot i que ha sofert diferents modificacions al llarg del temps. Destaca al seu interior les estances que conserven pintures murals romàntiques de l'última època en què va estar habitat el Palau.
El Palau era el centre senyorial de la vila, i es troba al capdamunt d’aquesta. Actualment acull el CMC –Centre Medieval i dels Càtars– i l’Oficina de Turisme. També a les seves sales es duen a terme exposicions temporals i actes culturals diversos.
