El viejo caserón del café es tan antigo como el actual perfil de la plaza, que data del siglo XVII, sus largas balconadas han sido mudos testigos de nuestra historia.
En sus salones se reunían los arrieros segovianos que venían a comprar el vino y aguardiente de Chinchón. En sus habitaciones se vestían los tereros que actuaban en fiestas.
En su fresco patio dicen que manejaba los pinceles "Goya" cuando su modelo, la garrida oza "La Graja" posaba para el cuadro de la "Asunción".