。时值年羹尧获罪，雍正帝以都统范时捷疏劾欺罔贪婪诸状，及妄劾道员金南瑛等，并下吏部议处。上谕曰：“前以隆科多、年羹尧颇著勤劳，予以异数，乃交结专擅，诸事欺隐。”命授缴所赐四团龙补服，并不得复用双眼花翎、黄带、紫辔。及议上，以时捷劾，请罢羹尧任；以妄劾南瑛，请严加治罪。
上以前议徇庇，后议复过当，责隆科多有意扰乱，削太保及一等阿达哈哈番世职，命往阿兰善等处修城垦地，谕曰：“朕御极之初，隆科多、年羹尧皆寄以心腹，毫无猜防。孰知朕视为一德，彼竟有二心，招权纳贿，擅作威福，欺罔悖负，朕岂能姑息养奸耶？向日明珠、索额图结党行私，圣祖解其要职，置之闲散，何尝更加信用？隆科多、年羹尧若不知恐惧，痛改前非，欲如明珠等，万不能也！殊典不可再邀，覆辙不可屡蹈，各宜警惧，毋自干诛灭。”
雍正四年，隆科多家仆牛伦挟势索贿，事发，逮下法司，鞫得隆科多收受年羹尧、总督赵世显、满保，巡抚甘国璧、苏克济行贿。谳上，雍正帝命斩牛伦，罢免隆科多的尚书职务，令他料理阿尔泰等路的边疆事务。不久命他前去勘察中国与俄罗斯的边界。起初，隆科多与阿灵阿、揆叙结党营私，与年羹尧交结。等雍正帝尽发阿灵阿、揆叙及年羹尧罪状，宣示中外，而受隆科多引荐的侍郎查嗣庭又被诛，雍正帝诘问隆科多，隆科多不以实对。
雍正五年，隆科多与沙俄谈判边境问题，即将成功，但由于结党营私，并私藏玉牒，雍正帝抓到罪证立即谴其回京逮捕、抄家；十月，定隆科多四十一条大罪，幽禁于畅春园。长子岳兴阿撤职、次子玉柱发配黑龙江。
雍正六年，六月，隆科多死于禁所。
在漫长的岁月里，邬思道见证了这一连串历史事件的发生。所有的一切正如史书上记载的那样，只是此时的他已经远离朝堂。一个人在这杭州淡然的过着半隐的生活，更多的时间回去海宁老家看望父亲。以往复杂的朝堂争斗让他心力交瘁，现在的生活才是他真正想要的。也许邬思道只想这般静静地老去，不再想太多太多纷扰。