四年四月，率众五千沿郁江东下，攻破横山砦，遂破邕州，执知州陈珙等，兵死千余人。智高阅军资库，得所上金、函，怒谓珙曰："我求一官统摄诸部，汝不以闻，何也？"珙对："尝奏，不报。"索奏草不获，遂扶珙出，珙惶恐呼万岁，救自效，不听，乃并其属及广西都监张立害之。立临刑大骂，不为屈。于是智高僣号仁惠皇帝，改年启历，赦境内。师宓以下皆称中国官名。
是时，天下久安，岭南州县无备，一旦兵起仓卒，不知所为，守将多弃城遁。故智高所向得志，相继破横、贵、龚、浔、藤、梧、封、康、端九州，害曹觐于封州、赵师旦马贵于康州，余杀官吏甚众。所过焚府库，进围广州。初，智高将至，守将仲简不许民入保城中，民不得入者皆附智高，智高势益张。先是，魏瓘筑州城，凿井畜水，作大弩为守备。至是，智高为云梯土山，攻城甚急，又断流水，而城坚，井饮不竭，弩发，中辄洞溃，智高力屈。会知英州苏缄屯兵边渡村，扼其归路；番禺县令萧注募土丁及海上强壮二千余人，与智高众格斗，焚其战舰；转运使王罕亦自外至，益修守备。智高知不可拔，围五十七日，七月壬戌，解去。由清远济江，拥妇女作乐而行，遇张忠战于白田，忠死之。去攻贺州，不克，夜害蒋偕于太平场。九月庚申，破昭州，害王正伦等于馆门驿。州之山有数穴，大可容数百千人，民闻兵至，走匿其中，智高知之，纵火，皆焚死。十月丁丑，破宾州。甲申，复据邕州，日夜伐木治舟楫，扬言复趋广州。十二月壬申，又败陈曙于金城驿。初，智高以反闻，朝廷命曙就击之，既而杨畋、曹修、张忠、蒋偕相继出，又以余靖、孙沔为安抚使。畋、修闻智高至，退军避之。忠、偕勇而无谋，皆死。智高益自恣，南土骚然。仁宗以为忧，命狄青为宣抚使，诸将皆受青节制。曙恐青至有功，亟挑战，故败。
五年正月，青及沔、靖会兵宾州，官军、土丁合三万一千余人，按军法诛曙及指挥使袁用等三十二人于坐，一军大振。于是进兵，青将前阵，沔将次阵，靖将后阵，以一昼夜绝昆仑关归仁铺。智高闻王师绝险而至，出其不意，悉众来拒，执大盾、摽枪，衣绛衣，望之如火，青阵少却，先锋孙节死之。青起麾蕃落骑兵，张在左翼出其后交击，左者右，右者左，已而左者复左，右者复右，其众不知所为，大败走。会日暮，智高复趋邕州，夜焚城遁，由合江口入大理国。得尸五千三百四十一，筑为京观，所掠生口万余人，复其业。获伪印九，黄师宓而下伪官五十七人，枭其首城上，收马牛、金帛以钜万计。智高自起兵几一年，暴践一方，如行无人之境，吏民不胜其毒。朝廷为下赦令，优除复，慰拊疮痍，百姓始得更生云。先是，谣言"农家种，籴家收。"已而智高叛，为青破，皆如其谣。
智高母阿侬有计谋，智高攻陷城邑，多用其策，僣号皇太后，性惨毒，嗜小儿肉，每食必杀小儿。智高败走，阿侬入保特磨，依其夫侬夏卿，收残众得三千余人，习骑战，复欲入寇。至和初，余靖督部吏黄汾黄献珪石鉴、进士吴舜举发峒兵入特磨，掩袭之，获阿侬及智高弟智光、子继宗继封，槛至京师。初未欲杀，日给食饮，欲以诱出智高，或传智高死，乃悉弃市。既而西川复奏智高未死，谋寇黎、雅州，诏本路为备。御史中丞孙抃又请敕益州先事经制，以安蜀人。然智高卒不出，其存亡莫可知也。
侬氏又有宗旦者，知雷火洞，稍桀黠。嘉祐二年，尝入寇，知桂州萧固招之内属，以为忠武将军，又补其子知温闷峒日新为三班奉职。七年，宗旦父子请以所领雷火、计城诸峒属县官，愿得归乐州，永为王民。诏各迁一官，以宗旦知顺安州，仍赐耕牛、盐彩。是岁，侬夏卿、侬平、侬亮亦自特磨来归，皆其族也。日新后尝监邕州税。治平中，宗旦与交阯李日尊、刘纪有隙，畏逼，知桂州陆诜因使人说之，遂弃其州内徙，命为右千牛卫将军。
有甲峒蛮者，亦役属交阯，间出寇邕州。景祐三年，尝掠思陵州凭祥峒生口，杀登龙镇将而去。嘉祐五年，合交阯、门州等蛮五千余人复为寇，与官兵拒战，斩首数百。诏知桂州萧固趋邕州发诸郡兵，与转运使宋咸、提点刑狱李师中合议追讨。是岁数入寇，又诏安抚使余靖击之。苏茂州蛮亦近邕州，至和、嘉祐中，皆尝扰边。
黎洞，唐故琼管之地，在大海南，距雷州泛海一日而至。其地有黎母山，黎人居焉。旧说五岭之南，人杂夷獠，朱崖环海，豪富兼并，役属贫弱；妇人服緦缏，绩木皮为布，陶土为釜，器用瓠瓢；人饮石汁，又有椒酒，以安石榴花著瓮中即成酒。俗呼山岭为"黎"，居其间者号曰黎人，弓刀未尝去手。弓以竹为弦。今儋崖、万安皆与黎为境，其服属州县者为熟黎，其居山洞无征徭者为生黎，时出与郡人互市。