方群玉看着劳燕分飞后的崔若曦，心中突然起了归意。他想人人费尽心机求取功名到底是为了什么？如果只为了一个虚妄的功名而家人离散、恩爱夫妻不能相见，那么这个功名求取的还值不值得？
方群玉幼时就立志辅佐君王实现尧舜之道，所以积极求取功名。贤相张九龄是他心中的楷模，张九龄以文起家，从文学走上政治，辅佐君王推行开明政治，维护着开元盛世最后的辉煌。对于玄宗不听张九龄的劝谏早杀安碌山，以致出现了后来的安史之乱，导致大唐从此衰落。方群玉常常为之扼腕叹息。考中进士做了补阙后，方群玉兢兢业业守候在皇帝身边，希望能及时提醒皇上，避免偏差，往尧舜之道上走。可是理想与现实，相距总是那么遥远，自己的忠心进谏屡遭驳斥，还数次险遭牵连。
方群玉在潘炳文弹劾杜宇飞收受荆南郡守邓戟的五十万钱的贿赂时，曾经上书为杜宇飞和刘退之辩解，他说杜宇飞收受邓戟贿赂是在录用刘退之之后，虽杜、邓两人之间收受贿赂之事因刘退之而起，但刘退之本人却与贿赂事件无关，不应该受牵连被贬黜。而且国家危难，到处需要用人之际，对待大臣宜弃细录大，不该轻黩大臣。不料皇上看了奏书后大怒，竟要治方群玉的罪，幸好有员外郎李远的极力劝谏，皇上才对他免于治罪。
后来方群玉听吴维信说，刘退之所以被贬，是因为他总向皇上说潘炳文的坏话。有一次说潘炳文的儿子潘高，没有按例先经过地方的选拔考试，就直接参加了进士科的考试，是“无解进士”，皇上听后并没有处理潘高和潘炳文，而只是把这件事告诉了潘炳文。因此潘一直记恨刘退之，想找机会报复他，只是因为刘退之为人谨言慎行，一直没有抓住把柄。这次受赂事件，他就顺理成章的做了殉葬品。
至于皇上处罚杜宇飞，除了潘炳文弹劾的罪名，还牵扯到了朋党，杜于飞和先皇朝的丞相李覃有些旧交，先皇在位时李覃曾打压圣武皇帝，想拥立另一个王爷做皇帝，结果失败。圣武皇帝登基后把他罢相并贬谪到了边远地区，后来李覃在贬谪地去世，杜宇飞听说后，曾写诗赞颂李覃当年做宰相时政绩辉煌，同时也为他被贬谪后的凄凉晚景哀叹，两相对照，仿佛讽喻圣武皇帝不容能臣。为此皇上愤怒，把他划为了前丞相的朋党，清理出了朝廷。
方群玉常想，在这样的朝廷中，理想不能实现，徒负朋党之名，这样呆下去还有意义吗？“苑外江头坐不归，水精宫殿转霏微。桃花细逐杨花落，黄鸟时兼白鸟飞。纵饮久判人共弃，懒朝真与世相违。吏情更觉沧洲远，老大徒伤未拂衣。”老杜的这首《曲江对酒》不也正表达出自己现在的心情吗？老杜哀伤老大徒伤未拂衣，自己现在还未老，拂衣而去还为时不晚，何不拂衣而去呢？何况家乡战乱，父母妻子生死未卜，自己怎能安心在皇都里坐享太平富贵？
方群玉回到家里把他的想法告诉了陆沅芷，陆沅芷听后闷闷不乐。在皇都他们两人的世界里，她自由自在，可以做一切她喜欢的事情。跟方群玉回了家，公婆会接受自己吗？大夫人会接受自己吗？还能随心所欲的生活吗？如果去了沅湘，母亲怎么办？跟着自己？自己尚且不确定能否被接受，带着母亲就更不行了。如果不带着母亲，她一个人留在皇都怎么办？而且母亲日渐衰老，难道让她老无所依？如果说为前程考虑，坚持让夫君留在皇都，他会同意吗？自己还未远行就考虑到了母亲，他的父母都远在千里之外，而且因为战争杳无音信，他岂不牵挂？还有他的夫人，唉~，想到方群玉的夫人，陆沅芷的心像是被狠狠的揪了一下，有了
夫人在身边，他还会像现在这样疼爱自己吗？
看着陆沅芷唉声叹气，方群玉很是心疼，他理解她的心情，也想尽自己所能的给她快乐，让她生活的无忧无虑。他知道她全身心的依赖着自己。自己也深深的爱怜着她，只有在她面前，自己才可以卸下伪装，在这个充满尔虞我诈、利益、背叛的皇都里完全放松身心。因为她在，在皇都的这个家才像个家，自己在皇都的心才有所依托。但是父母身陷险地，数年音信杳无，自己怎能不满心牵挂？还有家里的娇妻，想到妻子，方群玉的心里一阵疼痛。当年夫妻两个都常存生死相依、至死不移的抱柱之信，岂料现在，妻子却要每天在望夫台上望穿秋水等候自己。
方群玉心里不停的思考着、权衡着、摇摆着，他对这个放不下，对那个也放不下。权衡了一段时间后，他还是下定了回去的决心，他打算先自己回去，一来自己一个人路上速度可以快些，再一方面，现在到处兵荒马乱，路上也不安全，自己先探探路，等找到安全的路径后再接沅芷过去也不迟。
想好后方群玉就开始向皇帝辞官，皇帝很快批了下来，还赐给了他一些金银锦彩，作为他曾为朝廷所做贡献的奖励。方群玉回到家中把沅芷的母亲接了过来，让她在自己离开的时候陪伴沅芷。又去了杜宪处，帮他带了捎给父亲的杜宇飞的家信。又央杜宪让他夫人刘氏与陆沅芷母女勤走动，以便在沅芷母女有困难时给些帮助。杜宪一一答应了后，他又跟吴维信、源少良等打了招呼，让他们在自己不在时，沅芷母女遇到困难就给些帮衬。最后他把皇上赏赐的钱都留给了母女两个，作为自己不在时的家