1703年,68歲的索額圖在宗仁府餓死,康熙猶不解恨,下令抄襲他家,殺死他所有的兒子。五年後,康熙依然憤憤不平,把本朝第一罪人的帽子扣在索額圖的頭上。作為首輔大臣索尼的次子赫舍裡皇后的叔叔,索額圖的仕途註定要比別人更順利。後來的事實證明,索額圖確實沒有辜負父親和康熙的期望,取得了幾項著名的歷史成就,如近親鰲拜、平定三藩之亂、簽訂中俄尼布楚條約、摧毀噶爾丹等。後來,康熙將索額圖提拔為正品領侍衛內大臣家,封太子太傅。在索尼之後,索額圖再次成為朝臣們馬首是瞻的物件。但盛極必衰,物極必逆,左額圖,只沉迷於權力帶來的名利場,渾然不知,危險已降臨。
第一個危險是歷代皇帝都非常害怕的黨爭。為了壯大自己的力量,贏得依附於自己的大臣,索額圖毫不猶豫地與武英殿大學士納蘭明珠進行了秘密鬥爭,使整個朝廷陷入了混亂,達到了非所有黨和明黨的地步。1683年,康熙不願看到事情越來越嚴重,以包庇兄弟、作惡多端等罪名,將索額圖一卷到底,潛伏在家中。然而,康熙沒想到的是,黨爭卻趁勢崛起,也喚起了皇長子印旗奪權之心。康熙為避免皇子間楚爭愈演愈烈,於1686年重新啟用索額圖。索額圖重返政壇,不但沒有吸取教訓,反而犯了第二個錯誤,踏入了更危險的境地,假如第一個危險只是讓索額圖丟掉烏紗帽,第二個危險就足以殺死索額圖全族的生命。
太子黨為了自己的官位和家庭利益,也比任何人都希望胤人能順利繼承皇位。為此,他幫胤人做了很多事。1702年,胤人陪康熙巡視德州事,突然得了重病,索額圖立即被召到侍級。一個月後,皇太子的身體恢復了,但康熙對索額圖的態度是180°大轉變。原來,在此期間,康熙收到了密報,彈劾索額圖犯了三大禁忌。一是於志在皇太子面前坐馬車,二是無視聖恩,大肆收受賄賂,打壓異己。第三,為了讓皇太子提前登基,他想暗中暗殺皇帝。康熙大發雷霆,立即以結黨妄行議論。奉國師的罪名,將索額圖關押在宗人府,同時索額圖的家屬和子女也被圈禁,所黨官員紛紛落馬,再不辜負原來的風景。
康熙認定索額圖罪是不可原諒的,但考慮到索額圖為朝廷做出了巨大貢獻,他無法忍受殺害英雄的罪行,只是慢慢減少了索額圖的衣食供應。四個月後,68歲的索額圖,餓死了。康熙把胤倫的不成器都歸到了索額圖的頭上,於是給了他一個絕對的差評,索額圖的成本也是第一罪人。此後,索陀被否定,所有的軍政成就都始終釘在歷史的恥辱柱上。