A fines del siglo XVIII se inició la construcción de este edificio de estilo barroco.

La construcción albergó la factoría o estanco del tabaco, para el control y venta del mismo. 

Este edificio es famoso porque desde aquí Miguel Hidalgo y Costilla promulgó la abolición de la esclavitud en 1810 en la Nueva España.

El inmueble cuenta con dos niveles y en su interior sobresale su patio octagonal con una sólida arquería y una escalera que tiene el escudo de la ciudad al fondo, auténtica joya de la arquitectura moreliana.

En 1846 la vivienda fue adquirida por el estado y desde 1859 es sede del Palacio Municipal.