3月中旬，下江都督段颎回朝，隋人官吏也在三月大规模南下任职，如果说隋朝任用一些高级官吏倒也可以理解，但是隋朝几乎是一棍子打断，哪怕是县令县丞也由隋人担任，这直接掐断了江南士人的为官之路，大部分陈人官吏都除名不用，这引起了江南世族豪强对隋朝怀疑。

你消灭了陈朝，我来帮你管理，你不要我帮忙管理，那你下一步是不是就要消灭我？

当然如果单凭这一点，倒也不至于就引起江南豪族们的反抗，毕竟只是怀疑，但是隋人的下一个手段就直接引起了江南土豪们的恐慌。

4月初改下江都督为江南东道大行台，到任官员开始对南朝户口进行统计，户口统计是均田的准备工作也是北方官员重要的政绩考核标准，新任隋人官员为了政绩开始对江南庞大的隐匿户口进行搜索。

隋朝在数年前就在北齐故地开过大规模的户口括举，大索貌阅，然后支解大族，这一政策给隋朝带来了可观的收入。

然而这直接引起了江南大族的进一步恐慌，于是就有人散播谣言说，这就是隋人在搞黄白籍，只要上了户籍就会加三倍税，而且要加30天劳役，江南的世族豪强让自己的隐户们上山躲避括户，有的就在山中打造兵甲观察局势。

对此隋主杨坚只觉得是江南这群人愚昧无知，粗鄙奸佞，父不慈，子不孝，兄弟情薄，夫妇违义，长幼失序，尊卑错乱，简直就是一群垃圾，自己辛辛苦苦解放他们，他们居然就这样回报我大隋圣人可汗？。于是让苏威去制定一套礼教向江南人宣扬父义、母慈、兄友、弟恭、子孝等观点，到时候就天下太平了。

令杨坚郁闷的不止是江南的治理问题，还有陈叔慎的问题，陈叔慎称帝这事整的隋朝都知道了，一开始大家都不太在意，这陈叔慎无非就是高绍义第二，陈正理就是高宝宁第二。

高绍义是北齐文宣帝高洋第三子，在北齐灭亡后高绍义起兵欲图恢复，肆州以北280余城皆响应，后来高绍义战败，率3000人投奔突厥。突厥佗钵可汗十分敬重他的父亲高洋，称之为“英雄天子”，所以也厚待他。

于是高绍义在佗钵可汗的支持下即北齐帝位，年号为武平，流亡在北方的北齐遗民全部归属高绍义统辖。此后，高绍义与营州高保宁屡犯北周边境，并进兵幽州，配合范阳人卢昌期举兵反周，失败后又逃回突厥，成为北周边境大患。

直到580年6月，北周遣使送公主去突厥和亲，又派遣建威侯贺若谊贿赂佗钵可汗，请囚送北齐范阳王高绍义。可汗既得公主，又得厚贿，于是假装请高绍义围猎，而让贺若谊将其擒获。580年7月，贺若谊将高绍义从突厥囚送长安，而高保宁则继续支撑到了隋朝开皇三年。

但是随着衡阳惨败的消息传回了，隋朝不得不承认，这个陈叔慎比高绍义要强上不少，北逃的大将军刘仁恩奏折中对陈人的战力做出了极高的评价，他认为陈军战斗力远远超过北齐军队，虽然比不上百保鲜卑，也比不上关中府兵，但是对比河南，河北，蜀地的军队来说是略胜一筹的。

其次陈人水师十分强大，隋人之所以能快速济江全是陈后主无能，偌大的下游江面愣是一场水战都没打，倘若陈水师死守长江，在不济也能和吕忠肃，戚昕一样阻挡杨素三个月。