时正值洞庭湖的杨幺作乱，尚在广西的折彦质被委以重任，担任湖南安抚使兼知潭州。

折彦质在王燮、岳飞、韩世忠、刘光世诸部兵马的配合下，于绍兴四年二月剿灭杨幺之乱。

折彦质因与王燮不和，改知静江。九月，金联合和伪齐自淮阳分道南犯，举朝震恐。

左中大夫、知枢密院事赵鼎，举荐折彦质为川、陕、荆、襄都督府参谋官、枢密都承旨。折彦质星夜兼程赴任，缓解了伪齐自淮阳分道南犯的军事危机。

绍兴五年，折彦质返回临安，为工部侍郎兼都督府参谋军事，又为兵部尚书。

绍兴六年，折彦质签书枢密院事，不久兼权参知政事，与赵鼎、张浚等同掌朝政。同年十二月，因赵鼎和张浚之间的争斗导致赵鼎罢相，折彦质系赵鼎极力举荐，因此也被免职，黜知洪州。

绍兴七年赵鼎复相，折彦质也因此，起知福州。

但一年多之后，赵鼎再次罢相，秦桧独揽朝政。作为赵鼎旧交以及抗金派代表的折彦质，因此受到秦桧的强烈排挤。折彦质被免职，赋闲居住在信州……

绍兴十五年，侍御史汪勃投秦桧所好，说“彦质顷任枢府，怀奸误国。今居冲要之地，分守臣吴说私相议论，妄及朝廷”，而且再次强调说他是赵鼎同党，因此被贬郴州安置。

折彦质在郴州一住便是十年，一直到绍兴二十五年秦桧病死，才得以离开。

绍兴二十五年十二月，七十五岁的折彦质，被允许任便居住，随即又被复官端明殿学士、左朝请大夫。