Noong 1961, sa gitna ng isang bumagal na ekonomiya at mga alegasyon ng korupsiyon, si Garcia ay natalo sa halalan ng pagkapangulo sa kanyang pangalawang pangulong si [[Diosdado Macapagal]]. Pagkatapos ng pagkatalo, siya ay nagretiro na sa pultika ngunit noong 1971 ay hinikayat siya ni [[Ferdinand Marcos]] na mamuno sa isang bagong kumbensiyong konstitusyonal na lilikha ng [[Saligang Batas ng Pilipinas ng 1973]] ngunit namatay siya bago pa makuha ang posisyon.
