如今聚族而居的南宁平话人当中,除长堽村冯氏来自广东以外,族谱多记载祖先来自山东白马(今河南省安阳市滑县)。史书中多次记载黄河发大水,如《宋史》中就有“(天禧三年)六月……甲午……河决滑州。戊戌……河决滑州,泛澶、濮、郓、齐、徐境……八月丁亥……滑州龙见,河决”,“(天禧四年)六月丙申……河决滑州,秋七月……癸未……河决荥阳、顿丘、白马、温县”。更为详细的如《宋史·兵志》中的“庆历中,招广南巡抚水军、忠敢、澄海,虽曰厢军,皆以旗鼓训练,备战守之役。皇佑中,河北水灾,农民流入京东三十万,安抚使富弼募以为兵,拔其尤壮者得九指挥,教以武技。”还有记载侬智高起义的,如“(皇佑五年正月)戊午,狄青败智高于邕州,斩首五千余级,智高遁去。甲子,遣使抚问广南将校,赐军士缗钱……二月……丁壮馈运广南军需,减夏税之半,仍免差役一年。”《续通典》、《续资治通鉴长篇》、欧阳修《涑水记闻》中也有类似的记载。由此可以推断,黄河经常发大水影响了社会秩序,朝廷为了稳定社会秩序而招民为兵并统一集中训练。由于白马(滑州)既是灾区,又是兵家必争之地,因此便成为了操练军队的场所之地。侬智高起兵反宋后,狄青的军队在何处集结出发尚不得而知,但可以推断曾经过白马这个地方,甚至就是在白马出发的。因此,黄氏族人自称祖先来自山东白马、随狄青南下平蛮是可信的。当然,可能有一部分平话人,为了证明自己是纯血统的汉族人,保持心理上和地位上的优越(封建社会少数民族多受压迫),他们便不管祖先来自何处,在族谱上不管三七二十一一律写明“祖籍山东白马”,白纸黑字谁还敢说我不是汉人?本来,祖先来自山东白马并不就等于祖籍白马,但历代口口相传以致成误,或者是有意而为之。这种自称“白马遗民”的现象在壮族人当中同样存在,这可能是民族融合或攀附心理的结果。