建安十四年，四月。
李通战死，隆中营垒被破，水师舟船行进，欲载汉南数万百姓而走。屯驻岘山的曹仁得知隆中营垒遭袭，百姓将被劫掠，欲出兵救之。
然霍峻早有准备，柤中赶来的张飞在岘山南部虚张声势，用马尾捆用树枝，往来奔驰，以为虚张声势之用。让高翔在檀溪西段上岸，以五千兵马列却月阵，阻曹仁西进的兵马。
时霍峻自率万人也从汉南登岸，与高翔、张飞从多面包夹，与曹仁展开对峙。在多面迎敌的情况下，曹仁尝试派出牛金向西支援李通，却被高翔击退。对峙半日，黄忠率舟舸抵达，与张飞合兵。
见霍峻援兵不断增加，舟舸也装着数万百姓撤退而走，曹仁最终放弃派兵支援隆中的念头，转而加固营垒城防，防止霍峻举兵攻城。
霍峻深知自家底细，知道以自己帐下兵马，打不下襄阳，能夺走数万汉南百姓已是取了水师的巧。于是在次日的夜间，霍峻率帐下军士登船南撤，张飞、黄忠二将也烧营携民而走。
曹仁心有不甘，自率精锐步骑抄小路追击，击败撤退的后军。张飞让黄忠携民先撤，自率步骑英勇断后，这才让曹仁放弃追击。
此战，霍峻掠走汉南数万，得柤中民夷六万余人，合有十余万口。但十余万百姓也非汉南所有百姓，在汉水上游山区及襄阳城内依有数万百姓，曹仁将百姓尽数迁往叶、宛。
在霍峻、曹仁二人这般操作后，自当阳到襄阳的两三百里的丘陵、平原地带空无人烟，在未来的日子里，其间地带怕是仅有斥候、军士往来的身影。
襄阳彻底成为军事要塞，曹操在汉南少有的据点。而当阳、新城以南的数百里江汉平原，虽遭过曹操败军的劫掠，但依旧保留了南郡的精华。土地肥沃，百姓殷实，休养生息数年，凭南郡一地之力，足能养数万军士。
得闻霍峻率军南归，闲来无事的刘备带上鲁肃偷偷起程向北，欲见霍峻。
此时的霍峻正巡视公安新城，入目所见新城城郭未起，但城池的地段选址已定。在新城的工地上，士吏、农夫、工匠忙碌不停，或是工匠用墨盒、垂线等工具，在那丈量城池；或是农夫拿着铁锹、锄头等工具，在那挖掘地基；亦或是士吏持笔簿、挑算盘等物，在那巡视、盘点物资。
徐盛摊开城池图纸，指点说道：“都督，公安新城将依山而建，又临汉水，南北三百余步，东西二百余步。欲建城门三座，别置内城、瓮城，城高三丈，又以石砖筑城。在新城下游数里，有泊泽可建水寨，停留舟师。”
“时逢作战，新城北面拒敌，水师可逆江而上，袭扰敌寇粮道，敌寇当不战自退也！”
对于这座新城，霍峻不惜花费大量人力，修筑依山水建城，且又营造大小城，以迎敌军。毕竟霍峻对新城期望甚高，新城不仅要担任起屏蔽江汉的作用，还要成为吴楚插入襄樊的匕首。
若是城池不坚固，一旦曹军顺势南下破城，则江汉平原上的百姓，岂能保全？南郡又何谈厉兵秣马，伺机北伐。
至于为何名为公安城，算是霍峻的恶趣味。在送信给刘琦时，霍峻谈到襄樊城池问题，言‘新城若建，公可安心’，故而将新城命为公安城。
霍峻居高临下，观望营造城池的工地，说道：“金口一役，曹操所部死伤惨重，败逃中原。曹仁虽退守襄樊，但亦有折损兵将。近年间可得安宁，文向可安心建城。”
如此大工程的城池营造，非是一朝一夕所能完成。其工程进度时间，需要按年月计算。
顿了顿，霍峻说道：“今归江陵，峻当表文向为汉水督，操练汉水水师，肩负建城之重任。”
“诺！”
就在霍峻与徐盛细聊公安城及汉水督职责时，刘备、鲁肃也至公安城郭外。
“驾！”
刘备、鲁肃沿着汉水驱马而行，得见南迁的民夷已被霍峻安置在汉水河畔，在士吏君长的带领下，井井有序地劳作，或为公安城池搬运木材，或是运输石料。霍峻用以工代赈方式，帮助缺少口粮的百姓渡过缺粮之困。
刘备通过询问得知南迁的百姓，霍峻已让士吏筹备田亩，让南下的民夷领地自耕，不禁感慨说道：“世人皆谓仲邈善用兵，备却以为仲邈下马亦能安民。文武双全，上马治军，下马安民，仲邈之能远胜凡人。”
刘备认识霍峻越久，便愈发赞叹霍峻的才能。初识霍峻，献上博望对，提出南北分治之策；兵入江东，霍峻的军事能力绽放出来，背水破敌，千里取京口，火烧笠泽，硬生