Ollantaytambo durante l'impero Inca è stata la residenza reale di Pachacuti, imperatore che ha conquistato la regione, costruito la città e un centro cerimoniale. Durante la conquista spagnola del Perù, è stata una roccaforte per Manco Inca Yupanqui, capo della resistenza inca.
