Se cree que ya que el famosísimo poeta Francisco de Quevedo mantuvo contactos con distintos linajes nobles andaluces, y estando los Quesada tan bien conectados con círculos de poder y cultura de la época, es muy probable que el poeta y los Quesada tuvieran relación e incluso que Quevedo hubiera pasado por el palacio, ya que en esta época era en los palacios nobiliarios donde se reunían escritores, intelectuales, nobles y funcionarios del reino.