其實，高力士的原名是馮。由於當時馮家處境困難，馮宜遠被送到李在嶺南的家中。在這方面，馮亦園的命運被李改寫，他切除了馮的陰莖。當然，這在當時也是很平常的事情。畢竟當時需要很多太監。
後來馮改名高力士，被發配到如意宮侍奉武則天。因為容貌姣好，工作努力，贏得了武則天的喜愛，但還是犯了錯誤，被武則天趕走了。但高力士受到宦官的器重，收他為養子，悉心教導，使他成長為壹名優秀的宦官。
後來在武三思的推薦下，高力士又留在了武則天身邊，只是這次有點遠，被安排在了內務府，不過還可以，至少在宮裏還能混得下去。
神龍政變後，高力士成了李隆基的隨從。後來，在李隆基的策劃下，高力士為李隆基立下汗馬功勞，深得李隆基信任，成為李隆基身邊的宦官。後來高力士官位不斷上升，卻做不了大臣。然而，文武雙全是他的優勢，他的官職可以兼而有之。
而高力士是個圓滑的人，忠於他的主人。李隆基沒有時間做的事也交給高力士去完成，甚至連論文也交給高力士篩選後再交給李隆基。其實高力士雖然忠心，但是宦官畢竟是宦官，沒有長遠而深遠的眼光。所以很多事情都是基於當下的利益而不能考慮全局，所以歷史發展並不完美。畢竟高力士能做的，就是好好伺候他的主人。
後來文官武將，形形色色的人都找高力士為他們說好話，高力士的名聲進壹步提高。後來高力士的官位不斷提升。他雖然沒當上丞相，但已經和丞相壹樣了，是皇帝的紅人。所以會記載高力士的權力高於宰相。在安史之亂之前的唐玄宗時代，高力士曾經風光無限。