La primera noticia que aparece en Actas Capitulares referente a Gaspar Aguado es del año 1784, cuando pretende ser aceptado como vecino en la ciudad, donde se construía una casa a cuyas espaldas quería fabricar un muelle que le facilitaría el embarque y descarga de las mercancías con las que comerciaba y la vigilancia de los barcos que entraban en el Guadalete.
Esta casa ha llegado hasta nosotros conocida con el nombre de su padre, Roque Aguado, pero en realidad la mandó construir su hijo Gaspar
Delimita uno de los laterales de la Plaza del Polvorista, junto con la casa de Juan Vizarrón, más conocida como "Casa de las Cadenas". De acuerdo con la información que ofrece la documentación de la época, fue proyectada sobre otra construcción ya existente.
La casa sigue el modelo arquitectónico característico de las casas palacio construidas por la burguesía comercial asentada en El Puerto de Santa María, de tres plantas distribuidas en torno a un patio central. Éste destaca por su sobriedad, y por la presencia de pilares en lugar de columnas. De uno de sus frentes arranca la escalera principal, de tipo imperial, cuyo acceso aparece enmarcado en un arco trilobulado que descansa sobre dos columnas toscanas de mármol.
La fachada del palacio, de extrema sobriedad, está dividida en tres cuerpos. Como únicos elementos decorativos, cuenta con el escudo o blasón de Gaspar Aguado sobre el dintel de la puerta principal, y unas barrocas molduras mixtilíneas enmarcando los balcones del piso principal.