El Palacio de los Vargas (denominado también Palacio de Iván de Vargas es un edificio ubicado en la Plaza de la Paja del Barrio de La Latina . Los propietarios iniciales fueron la familia Vargas, potentados del siglo XVI que poseían otras casas en Madrid, como el Palacio de la Casa de Campo . El palacio está adosado a la capilla del Obispo de Madrid.