长沙财产被焚毁后，刘居吾被迫携家眷从长沙迁至衡阳，并在衡阳市中山北路开设了“建业布匹棉纱商行”，自己亲自担任经理；后又与同乡、友人合股开建了“合群糖店”“群力庄”等商行。民国三十二年（1943），衡阳市常遭日本飞机轰炸，市民成群结队纷纷出逃城郊。衡阳由国民党第十军军长方先觉率领全国两万多人围守，坚守四十七天，因失去援军，孤军作战，衡阳失守。之后，刘居吾及家人进入真正的逃难生涯。不久，冷水滩、东安、全州、桂林、柳州的国民党溃军兵败如山倒。刘居吾及家人从柳州乘闷罐车一路逃到了金城江（现为河池），沿途走走停停，火车运行了近三个月。此时，刘居吾所带的钱已所剩无几，又无亲友可投，只得在稻田里自建草棚，挡风避寒。后来，刘居吾又携家眷从金城江逃难到独山，再从独山逃难到了贵州贵阳市，不得已靠在街上摆地摊变卖衣服维持生计。为了生存，后又不得不从贵阳逃亡重庆。到重庆后住在陕西街179 号永利大楼刘震武家中。

抗战胜利后，民国三十五年（1946），刘居吾携家眷从重庆经贵阳、湘西回到了衡阳市，后又乘汽车回到了老家江西吉安沙湾村。结束了终生难忘的逃难生涯。中华人民共和国成立前后，刘居吾再次回到衡阳。1950 年元月，刘居吾与其同乡合股在衡阳解放路开设了私营复茂兴钱庄，办理存放汇业务。1950 年8 月，刘居吾离开衡阳市，居住在长沙市都正街清香留四号。此后，刘居吾再无经商，直至1963 年病逝于长沙。(www.daowen.com)