半年之后，索额图在宫中，感觉越来越得不到玄烨的信赖，玄烨也渐渐的疏远了他，但凡有关朝政之事，似乎都没有索额图的参与。
后来，索额图就干脆以自己年老为由，上奏辞退，告老还乡。
一年后，玄烨再次南巡，离开京城的前一天晚上，留宿在荣妃的宫里，荣妃问道:“皇上此次南巡，是打算走旱路，还是走水路呢！”
玄烨回道:“这次南巡，朕打算从水路，朕想带上你。”
荣妃一听，连忙说道:“皇上，后宫事务繁多，臣妾就不陪皇上去了，皇上还是另其他嫔妃伴驾吧！”
“唉！为何要拒绝呢！朕让你去是看得起你，其他嫔妃还没这个资格呢！后宫里的事务再多，也多不过前朝，朕为了这次南巡，还不是都把前朝的给落了下来。”
荣妃犹豫着，问道:“那皇上只单独带臣妾吗？”
荣妃说着，玄烨想了想，然后说道:“再带上胤礽，就够了。”
“也是，胤礽将来是要统治大清的，带他见见世面也好。”
荣妃说着，玄烨就突然大声吩咐说道:“传太子殿下。”
大约在一个时辰左右，胤礽便来到了荣妃的宫里。
胤礽进来之后，向玄烨和荣妃行着叩拜之礼，礼仪行完之后，玄烨就将南巡之事告诉胤礽。
胤礽听了之后，回答说道:“皇阿玛，此次南巡，儿臣就不去了。”
玄烨一听，气愤的说道:“让你南巡你都不想去，将来如何继承皇家大业，成为一朝天子。”
此时，荣妃连忙对胤礽说道:“你皇阿玛说的对，现在不去学会这些，等将来你继位就措手不及了。”
胤礽回道:“儿臣身体不好。”
玄烨说道:“身体不好，多叫上几个太医就是了。你早些回宫休息吧！明晨就出发。”
胤礽刚走出荣妃的宫里，玄烨好像又想起了什么，然后就对荣妃说道:“这一路南巡，要不再带上德妃，在路上无趣的时候，听她弹些曲子打发时间。”
“那臣妾就让宫人替皇上去宣旨。”
天亮之后，玄烨和荣妃、德妃，还有胤礽，各自穿上朝服，还有一些大臣，一同踏上船只，隆重的仪仗队伍将等人送出了紫禁城。
数日之后，玄烨、德妃等人已经经过了天津，进入河北境地。
一路上，胤礽一直待在船舱里，很少出来，而是德妃和荣妃陪伴着玄烨，正在观赏着水道两旁的景色以及庄稼，德妃还时不时的弹些曲子，为玄烨解乏。
进入山东地界，玄烨没打算继续前进，而是暂时停留下来，暗访民情。
大约快到了德州，突然发现前方的人烟越来越是稀少，玄烨一时感到好奇，于是就向身后的大臣们问了一句:“这方圆十里，都没见到好几户人家，人都到哪里去了。”
于是，身后的大臣高士奇突然站了出来，回答玄烨说道:“皇上，不如您们先到前方歇会儿，让微臣这就去打听打听。”
玄烨一听，回道:“这样也好。”
高士奇说着，便下了船只，到附近的去打探消息。
高士奇还没走走多远，突然从别处迎上来一名老者，高士奇见到老者，就开始打听起来。
老者仔细观察了高士奇一般，问道:“那你们是何人。”
高士奇犹豫了一会，回答说道:“我们是朝廷的臣子，到乡间视察民情。”
老者一听，转身就想离去。
高士奇连忙拉住老者的手，问道:“老人家，为何您听到我说是朝廷的臣子，就突然要离我而去。”
老者两眼望着高士奇，半天才回答说道:“我家已经没有壮丁了，你抓我一个老头去，也没有用的。”
高士奇听了老者的话，感觉有些奇奇怪怪的，于是又追问道:“老人家，别害怕，你说你们家已经没有了壮丁，这是什么意思。我们是朝廷的大臣，是专门视察民情，替乡民解决困难的。”
老者又看了高士奇一眼，反问道:“你们真是替乡民解决困难的？”
“正是。”高士奇说着，便用手指着玄烨等人的船只，对老者说道:“您看，站在船头最前面的那位，正是当今皇上，康熙皇帝。皇帝身后的那两位，是荣妃娘娘和德妃娘娘。”
“果真是皇上，穿戴都与平民有所不同。”
“老人家，这下您可以告诉我了吧！为何方圆十里，很少看到有人家。尽管说吧！若是有什么委屈，可以直接与皇上面对面的交流。”
老者想了半天，才开始说道:“索额图您应该知道吧！”
“索额图我知道，是皇上原配皇后的三叔，您接着往下说。”
“哎呀！这几年，索额图到山东来抓壮丁去充军，家中但凡有青年男子的，都已经逃到外地去了。”
“索额图来山东抓壮丁，这事怎么没听说过。”
高士奇正自言自语的说着，老者又突然问道:“方才的那条大船上，为何会有两位皇上。”
高士奇一听，连忙回道:“船上就只有一位皇上呀！”
“那为何有两个人穿的衣服是一模一样。”
“哦！年轻的那个，是太子殿下。皇上在船上刚上完朝，和太子殿下还没来得及换下朝服。”
“皇上在船上也上朝？”
“是呀！皇上上朝，所有人都要身穿朝服，那条船上，还有许多大臣呢！”
“喔！”
再过了一会儿，老者又突然问起:“请恕老朽愚昧，这当今皇上，人人都知道是一国之君