高力士身长六尺五寸，与宋金刚当初都经过严格培养训练，以力大勇武出名。高力士更是因为家族遗传矫健勇武，精于骑射，能开得硬弓，射得快箭。但由于高力士为人谨细，富有智谋，后来在宫内迭有奇遇，值到成为开元皇帝深加器重的宦官之一。每有四方进呈上奏文表，必先送呈高力士，然后进奉御前，小事便自行裁决，可谓权倾中外。而当时以“力士”“金刚”并称的另一名“私白”宋金刚，则命运不济，让人为之叹息：同样都是“私白”出身，一起送入长安京城，却命运如此显晦有别，一个天上，一个地下矣。
高力士常止息于宫中，很少出外宅。
李隆基常说：“力士应承于前，我歇息则安稳。”
所以，在作了魏征入梦的恶梦后，李隆基第一时间就让小太监通知高力士前来。
高力士按年龄要比李隆基还要大上一岁。一个三十五岁，一个三十六岁，长期的相处默契，使得高力士一见李隆基神色，便知有事，马上恭敬行礼：
“圣上急把奴才叫来，不知因为何事？可有什么吩咐，要奴才去办？”
高力士把自己的身份定得死死的：自己就是圣上的家奴，被封一个大夫官身，加封一个将军身份，那是圣上对自己的赏识。自己一切唯圣上上命为大，这条命，就是属于圣上的。自己出身卑微，被拔在青天之上，但自己在圣上跟前，就是圣上脚下所履那块泥土，不，自己比那泥土还要来得低下才是。
高力士对开元皇帝李隆基，可是绝对忠诚不二，他这一生愿为皇帝蹈汤赴火，肝脑涂地，不辞万死。
李隆基向高力士温声问道“未知令堂从岭南来到京城，生活可还习惯？”
高力士养父高延福夫妻，按定分享受供奉。岭南节度使于潘州找到其生母麦氏送至长安，高力士让两位老妇人同处高堂，美食供养。
说到高力士这生母麦氏，那原来也是大有身份之人。她是一代名侠、前隋朝大将军麦铁杖之后。后来高力士之父被流人造反案牵连获罪，