时候高力士的曾祖冯盎还因为举地归义与平定獠蛮叛乱而受封越国公，并为高州总管，是货真价实的方镇大将。其势力最盛之时，所统辖区域相当于如今岭南五管三分之一的地域。
后来虽然由于朝廷收回地方权力而撤除总管府，但冯氏子孙在岭南仍然拥有着不小的势力，冯盎的直系子孙多分领岭南州府官职。
原本的历史上，高力士一家是受岭南流人谋反案牵连，其父被酷吏处死，而年幼的高力士则被阉割为官奴，辗转数年之后才被时任岭南招讨使的李千里送到了大内。
可如今的历史在李潼的影响下早已经变得面目全非，且不说李千里这些年根本就没有前往岭南任职，就连原本的岭南流人谋反案，其过程与结果也与历史上大为不同。
当下这个时空里，当朝中出现有关岭南流人意图谋反的议论时，李潼已经归朝且在朝中具有了一定的势力。当时他正担任嵩阳道行军总管，朝廷派往岭南调查案情的酷吏在经过洛南地区时，他还顺手宰了几个，而在嵩阳道行军结束归都之后，更是直接联合宰相发动政变，掀翻了他奶奶的统治。
正是因为李潼的这一通折腾，原本历史上岭南流人被大肆屠杀的惨剧并没有发生。虽然当时李潼的主要意图也并不是为了岭南那些流人的性命，但客观上也算是救了他们一把。
只不过，当岭南流人大赦归朝的时候，李潼早已经离开朝廷中枢、回到了长安。而那些流人们也少有感念李潼的救命之恩，反而许多人在回到朝中任职后更坚定的反对行台霸府，于是在靖国时期又被李潼干掉了一批。
不过这些人事上的反复显然跟远在岭南的冯氏关系不大，既然岭南流人案没有按照历史上那样发生，高力士又怎么会被阉了并且送入宫中？
怀着这样的疑惑，李潼又望着冯元一问道：“冯氏岭南著宗，国朝元勋门户，子孙纵有损节、不复祖辈忠义，但典刑量法亦不失照拂，元一因何沦为奴身？”
冯元一虽然颇有几分少年老成，但终究还是一个少年，并不擅长伪装情绪，听到这问题后顿时两肩一耸，垂首悲泣起来，过了一会儿才开口回答道：“家父旧职潘州刺史，治中多有流人在居。那些流人们获罪于国，处境难免凄楚，早年圣人革命国中，相王窃位当国，不审罪否、大赦流人。
当中便有奸怀深刻者，归国得势后迁怒州官，诬蔑家父失于食料供给，是武氏党徒，所以遭罪……家人惨遭刑诛，仆因年齿尚幼，受刑之后没入司农为官奴，圣人靖国归祀之际，选入内
…。。