不久御医沈南蓼成为武则天的新宠，薛怀义出于嫉妒，一把火烧掉了耗资巨万的万象神宫，武则天却不予追究。而后薛怀义日益骄横，终于引起武则天的厌恶，指使人将其暗杀。薛怀义死后，已过中年的沈南蓼尽管很温，由于已过中年，身心比较虚弱，因此满足不了武则天的需求，于是武则天又陷入了苦闷的境地。
恰在此时，有人又荐张易之兄弟待寝，这两个二十岁左右的美少年，不但聪明伶俐，通晓音律，而且精力旺盛，更有侍寝的本领，把个武则天服侍得舒舒服服，武则天对这两兄弟宠幸有加。但二张恃宠而骄，不仅在后宫恣意专横，而且结党营私干预朝政，引起了众怒。终于在神龙元年，张柬之等策动了“宫廷政变”，杀掉二张，武则天也在病榻上被“请”下御座，让位于中宗。