La fundación de Panamá fue el producto de los intereses de la Corona Española por dominar la ruta hacia Oriente y buscar el paso hacia Las Molucas. Sin embargo, tras las exploraciones por la costa Pacífica, Panamá se convirtió en el punto de apertura y expansión imperial, que permitió impulsar la conquista por el océano Pacífico. Fue además, una ciudad clave para el tráfico de personas procedentes  de África, quienes desde allí eran movilizadas a distintos puntos de las colonias. La ciudad de Panamá contaba con los barrios suburbanos de Malambo y Pierdevidas, los cuales fueron habitados principalmente por la población de origen africano que residía permanentemente en la ciudad.

Hacia el final del siglo XVII, Domingo Grillo y Ambrosio Lomelín nombraron  en la ciudad de Panamá algunos de sus agentes más capaces. La ciudad sirvió como puerto de tránsito para al menos el 60% de las personas africanas esclavizadas que fueron vendidas en las colonias españolas durante la época del contrato establecido por la Corona Española y Grillo y Lomelín.

La Casa de los Genoveses, como se conoce hoy en día, fue el lugar donde se estableció la red comercial de Grillo y Lomelín, que era uno de los edificios más importantes de la antigua ciudad de Panamá. Dentro del patio interior se encontraba una enfermería, que se dedicaba al cuidado de las personas esclavizadas que llegaban a Portobelo bastante enfermas después del violento viaje desde África. Sin embargo, los documentos históricos sugieren que la mayoría de las personas que ingresaban en esta condición no salían vivos de la casa de los genoveses.

La parte superior de la casa contaba con ventanas que permitían vigilar el océano Pacífico al este, las Casas Reales al sur, la Catedral al oeste y la enfermería al norte. Esto además les permitía controlar tanto los barcos que llegaban como aquellos que salían de la costa, junto con el tráfico de personas. 

La Casa de los Genoveses forma parte del conjunto monumental de Panamá la Vieja, declarado como Sitio de Patrimonio Mundial de la UNESCO desde 1997. Panamá la Vieja es, hoy en día, uno de los más importantes sitios arqueológicos e históricos de Panamá.