据《后汉书》记载: 光武帝刘秀是南阳郡(汉代郡名,治所在今河南省南阳市,辖境相当于今天的河南省鲁山以南,确山县以西,湖北省汉江以北的襄阳市、随州市,武当山以东及陕西山阳等地)蔡阳县人,也就是今天的湖北省襄阳市所辖的枣阳市人。
刘秀是汉高祖刘邦的九世孙,是西汉景帝刘启的后代,其先祖原本住在零陵郡(汉代郡名,治所在今湖南省零陵县,辖境相当于今邵阳市以南,衡阳、宁远以西,广西恭城以北及湖南雪峰山以东地区)春陵乡。
后来,刘秀的叔大爷考侯刘仁上书汉元帝,说湖南零陵这个地方长年气温较高,山林中湿度较大,瘴气很重,人容易生病,要求将封邑向北迁移。刘仁的上书说得很恳切,甚至说只要允许其内迁,哪怕减一点封地都行。
汉元帝同意了他们的要求,颁诏徙封刘仁到南阳郡蔡阳县的白水乡,还以“舂陵”为侯国名称。
于是,在元帝初元四年(公元前45年),刘仁带着他的堂弟巨鹿都尉刘回,也就是刘秀的爷爷,及其家族成员,搬到了新的封地白水乡(即今枣阳市吴店镇)。