据记载“商朝时，‘百越’部族聚居南方，其中‘仓吾’部落，大部分分布在桂江、贺江流域”。春秋战国时，在梧州聚居的原始民族部落称“仓吾”。《逸周书·王会解》有明确记载：“仓吾翡翠。”《越史丛考》有：“仓吾为国，已早见于周也。”徐石松在《粤江流域人民史》中说：“仓吾乃古代的南蛮。”

秦末，中原群雄逐鹿，南海郡龙川令赵佗乘机绝道封关，兼并象郡、桂林郡，屯兵严关、秦城关、桂岭，于汉高帝四年（公元前203年）建南越国。高后五年（公元前183年），赵佗自称“南越武王”，定都番禺（今广东广州），独据岭南，建赵佗王城。赵佗打败安阳王后，又建苍梧王国，封其族弟赵光为苍梧王。

“高后五年，佗以其族赵光为苍梧王，治广信”。“古广信土城也，昔苍梧王赵光始居此土。其后汉置郡县交趾刺史因之。考其旧基依茶山（今北山），傍桂水（今桂江），大江（今西江）绕其前”。