一就在杨素、来护儿率领水军，大破太湖别栅，全歼东路李棱叛军的同时，奉旨抚绥江南的杨广也从并州南下，抵达了广陵。
杨广深知，父皇杨坚此次改任自己为扬州总管的用意与上回不同，意在用怀柔的方法安绥江南士族、百姓，使江南早日融入隋朝，实现四分天下归为一统的宏愿大志。
因此，他在从并州启程南下前，专门上书杨坚，请求携王妃萧厄一道镇抚广陵，同时致书其幕府两位智囊——张衡、裴蕴护送萧厄赶赴广陵与自己会合。
由于与上回统领数十万大军渡江伐陈不同，杨广在抵达广陵后，没有住进新城的老帅府——张园，而是将自己的驻哔之地改在了蜀冈上的扬州总管府，以期能和城中百姓住得更近些，方便体察民情民意。
杨广率领晋王骠骑营一行人马抵达广陵，住进扬州总管府的第三天一早，张衡、裴蕴二人护送着王妃萧厄也赶到了广陵。
不等杨广亲自将萧厄接进总管府，夫妻二人说上几句体已话，张衡便不解风情地请杨广到总管府正厅，称有要事向杨广禀明。
待杨广、张衡二人走进总管府正厅，迎面只见裴蕴面带愠色地站在厅内，不由得转身问张衡道：“建平，冲之此怒何来呀？”
张衡盯了裴蕴一眼，先请杨广上座，尔后方拱手朗声禀道：“裴蕴身为晋王幕府长僚，未经王爷允准，便擅自做主，将心意、司马珞并与二人同处之越国公家仆冯小惜俱招至广陵，请王爷治他不敬之罪。且建平位居晋王府长史，身为幕府僚佐之长吏，不能尽职尽责，及时制止裴蕴，也请王爷一并降罪处罚。”
杨广不意张衡急急忙忙地将自己拉到这里，原是为了告裴蕴的状，请自己降罪处治他二人，遂转向裴蕴问道：“冲之，你既明知本王出镇并州前交待你和建平二人留京监视心意，为何不经本王允准，擅将她和司马珞带来广陵啊？”