Edificio de planta cuadrada y tres alturas. La fachada principal se encuentra en la Plaza Mayor con portada plateresca de puerta adintelada, con jambas de piedra rematada con canes que sujetan un ancho dintel. Está rematada con el escudo de los señores de Montalbán. Los balcones que la adornan son rectangulares, de forja, y típicos de las casas señoriales castellanas.
En el interior hay tres magníficos artesonados de pino: uno mudéjar, otro gótico y un tercero plateresco.
El palacio se construyó en el siglo XV por el maestre de Santiago D. Juan Pacheco. Lo hermoseó su descendiente D. Alonso Téllez Girón a principios del siglo XVI.
Fue declarado Bien de Interés cultural por el Gobierno Regional de Castilla-La Mancha el 26 de noviembre de 1991 (DOCM nº 95 de 18 de diciembre).