然而陈霸先举止恭敬，萧纪一到广州，拜谒过后，便领军回了驻地，对于心向他的各地梁军，也未见吞并之意，这使得萧纪大为放心，将陈霸先倚为心腹，以其忠勇，尽委军事，自己一心治政。
萧纪去了岭南，江州自然落在了萧绎头上。
萧绎与父亲拜别，领着王僧辩、杜氏六骏、杜龛、以及湘东王世子萧方等之舅父王琳等班底，出镇浔阳。
齐使所坐船只行过浔阳江面时，还曾与萧绎有过一面之缘，萧绎问起自己在江陵城中的家眷，得知徐昭佩及其三名情夫尽被高澄处死，一时激动，当场写下《荡妇秋思赋》，用以讥讽其妻。
徐昭佩那些荒淫举动，萧绎并非不知，更憎恨徐昭佩杀死自己爱妾王氏，只不过因其家世只得忍气吞声，不曾发作而已。
又询问自己爱妾与诸子，齐使只隐晦透露萧方智拜高澄为义父，瞬间心情两级反转。
当然，高澄好色，世所共知，侍妾们落于他手，又哪能保住清白，萧绎早有心理准备，况且侍妾与妻子名分不同，贵族之间，赠妾时有发生，萧绎便以此安慰自己，又询问高澄是否能够许自己赎买儿子。
齐使照实回答，可遣人往江陵商谈萧方矩、萧方略、萧方规三人赎金，只有萧方智作为高澄假子不能被赎回。
萧绎初时不忿，后转念一想，若大梁社稷倾覆，尚有萧方智在江北为自己延续血脉，又转怒为喜，放行齐使。
齐使继续顺流而下，萧绎在江州寻访美人之余，亦派心腹杜岸往江陵，与高澄商谈赎回三子，藏书，以及早亡的爱妾王氏之妹，萧绎对小姨子可谓垂涎已久。
杜岸来到江陵，才提出王氏之名，却被告知此人已蒙齐主宠幸，又得知藏书被运往了洛阳，只得把谈判目标放在萧方矩、萧方略、萧方规三兄弟身上。
高澄考虑到萧绎的家当大多都在江陵，被自己所得，拿不出太多钱财赎买，便只开价一人一万匹布，三人相加与萧渊明相当，共三万匹，不许还价。
杜岸一口答应下来，这价格够公道了，他来江陵前，萧绎还担心高澄以萧渊明卖出三万匹布为由，索要相同价码。
高澄与萧绎私底下的谈判进行得相当顺利，可抵达建康的齐使与南梁朝堂却艰难不少。
安陆城中二万余俘虏都是军中精锐，萧衍自然要将他们赎回，却只肯以历阳和议为例，出每人一匹布的价格。
高澄却以其精锐为由，要价人均两匹布，一番讨价还价后，最终各退一步，以普通士卒人均一匹半为价，将这批在安陆城中深受齐军宣扬北方土地政策的梁军俘虏送回江南，得布三万余匹。