杨广一向对这个年纪最小的弟弟颇有好感，此时见他在自己面前有意摆出一副僚属领受上司命令的架势，忍不住走上前伸手刮了一下他的鼻子，存心逗他道：“我可记住你这句话了啊，要是日后你在并州捅下篓子，可别怪我事先没提醒过你啊。”
和杨谅哥俩一通玩笑过后，杨广暂时将对高连升的怀疑抛在了脑后，逐一和前来送行的李彻、李雄、杜彦牵手话别，殷殷叮嘱他们在留任河北期间，务必要竭心尽智，辅佐汉王镇守好北境，确保一方平安。李彻等人也向杨广表示，他们会一如既往地替朝廷镇守好边关，以不负晋王所托的。
眼瞅着日影西斜，经段达等人提醒，杨广这才正式辞别了前来送行的众人，翻身上马，回头朝并州城的方向深情凝望一眼，扬鞭策马，南下而去。
就在杨广从并州启程，返回长安赶赴新任的第二天，虞孝仁陪同愁眉苦脸，满腹心事的高连升也离开了并州，一路向东，返回高句丽劝说高汤亲赴长安，朝见大隋天子去了。
半个月后，当他们即将进入高句丽国界时，虞孝仁却被镇守边关的高句丽军士挡在了国门之外。
“你是隋朝将军，未经国王诏准，不得擅入我国境内。”领头的一位高句丽将佐操着半生不熟的汉话对虞孝仁说道。
“我哪儿是隋朝将军，分明是你们王叔店里的伙计嘛。”虞孝仁眼巴巴地望着高连升，希望他能开口替自己说说话。
孰料，高连升冷笑一声，只改用高句丽话向那将佐吩咐了几句，看都没再看虞孝仁一眼，就头也不回地带着随行的几名伙计扬长而去了，单把虞孝仁丢在了高句丽国界之外。
“高连升，王爷真没错看你，你分明就是高句丽的细作，你快给我回来！”虞孝仁一急之下，冲着高连升的背影大呼小叫起来。
而他的这通大呼小叫换来的，除了高句丽军士的几句斥责之外，却对高连升没有产生丝毫的效果。