好在当时正逢陈建志在东安城以西的黑土岭韬光养晦招兵买马，东安县的地方豪门遂做起了‘拉人头’的买卖，他们垄断了整条芦洪江所有的船只，不计其数的湖广难民无奈停留在芦洪江的北岸。
东安县地方豪族允许难民乘坐船只渡江，但一个青壮只能带上自己的妻儿，因陈建志的招兵标准就是如此，要想让手下的士兵忠诚，那最好的手段可不就是‘保护’好他们的家眷？
当然，地方豪族可不仅仅是帮黑土岭的陈建志招募青壮，但有那姿色可人的妇女或是长相俊俏的童男童女，等在芦洪江南岸的牙子牙婆们又岂会放过？
至于年长者，黑土岭那边不会要，牙子牙婆们也不会要，老者们根本没法登船，只能在芦洪江北岸听天由命罢。
故此，唐善智的儿孙们皆携家眷含泪渡江去往南岸。
当晚，唐善智在芦洪江边默默地回忆了这一生，随后便欲跳入冰冷的江水中。
或许唐善智真个是阳寿未尽，当时，唐世勋正好带着于青青和李有茂等人第一次离开小狼山寨前往芦洪市。
而唐世勋在进入芦洪市之前恰好撞见了意欲投江的唐善智，也正是唐世勋救了四爷爷善智。
之后唐善智的日子可谓是否极泰来，他先是跟李有茂、于青青、于老七在东安城以北的白牙市建立了接应世勋等细作的秘密据点，而后又被唐世勋带入东安城内享福。
当东安城被官兵重新夺回以后，唐世勋离开东安城潜入零陵城，到了今年正月初，官兵细作唐世勋为救广西杨总兵麾下陶将军而在湘口关‘牺牲’的噩耗传至东安城。
唐善智险些被这噩耗给惊得一口气没接上来，他在孙儿世勋的衣冠冢边结庐而居足足待了半个月有余。
后来唐善智虽被颜梓玉的堂兄颜俊尧给接回了东安城内居住，但老爷子每日里郁郁寡欢难以释怀。
其实唐善智不仅对世勋的‘逝去’感到痛心，也为他自己这一脉‘绝后’而愁眉不展，因他自从进入东安城以后就四处打听他的儿孙们的下落，可直到三月底都没打听到任何确切的消息。
也正是在三月底，唐善智得知世勋居然‘复活’了！而且还入主了祁阳城？老爷子激动得泪流满面，那是跪在地上感谢列祖列宗保佑世勋。
当唐世勋在四月初十建立楚军、陈建志率虎贲营‘入股’楚军以后，唐善智在东安城的日子也愈发安逸。
老爷子不仅受到参将包耿和千总齐雄等人的照顾，且包耿的弟弟包直、千总齐雄的堂弟齐二春为了与老爷子搞好关系，那是仔细地挨个查找当初加入黑土岭官兵的难民名册。
结果还真让他们找到了唐善智的亲长孙唐世衍的下落。
原来，唐善智的儿孙们在芦洪江与他道别之后就去往了黑土岭，但当时的黑土岭也食物匮乏，且唐世衍与父亲等皆未用真名，而且他们为了让家人们活下去选择了做逃兵。
但他们携家带口的能跑多远？结果被抓了回来关入死牢，直到官兵夺得东安城以后才被释放，而当时除了唐世衍，其他的家人早已死绝。
唐世衍已是对官兵绝望，遂隐姓埋名去往了桂林府的全州城……