高照容的父親高颺共有五男三女，都生在高句麗，最大的女兒據其墓誌知生於文成帝興安二年（453），那麼太和初全家遷於平城時，她早已成年，可能已經出嫁。據她的墓誌，其夫是韓賄。高颺舉家「入國」時，同行者有「鄉人韓內」，這個韓賄可能與韓內是一家的。高颺夫妻以及他們比較大的幾個兒子，高琨、高偃、高壽，在宣武帝親政以前都已去世，都葬在平城（唯一不清楚葬地的是高壽，高壽不與於封贈及改葬，既可能因為庶出，也可能因為死在「入國」之前）。宣武帝尋親時，舅舅中只剩了高肇和高顯兄弟二人，於是封已去世的外祖父及在世的兩個舅舅為開國公，外祖父高颺的公爵由其長子高琨繼襲，高琨已死，則由高琨長子（所謂高颺嫡孫）高猛繼襲。據高猛墓誌，高猛生於太和七年（483），與宣武帝年歲相當，襲封勃海郡開國公時已十八九歲。
宣武帝給外祖父追贈勃海公，顯然是要把自己的外家攀附上著名的勃海高氏，因此後來高肇還長期擔任冀州大中正。遷都前後的一些年，正是有權勢者更改籍貫、重塑郡望的大好時機。以《魏書·恩倖傳》為例：王叡「乃言家本太原晉陽，遂移屬焉」；王仲興「世居趙郡，自以寒微，雲舊出京兆霸城，故為雍州大中正」；寇猛「自以上谷寇氏，得補燕州大中正」；茹皓「自雲本出雁門，雁門人諂附者乃因薦皓於司徒，請為肆州大中正，府、省以聞，詔特依許」；趙邕「以趙出南陽，徙屬荊」，先後任南陽中正、荊州大中正；侯剛「以上谷先有侯氏，於是始家焉」，也擔任過燕州大中正。要成功打造郡望，把自己一家與某地古老的名族混同起來，只遷移籍貫是不夠的，還要把家搬過去，成為當地名副其實的大地主，同時還應把葬在外地的父祖先人遷回「故鄉」。比如王叡一家本來都葬在平城，「遷洛後，更徙葬太原晉陽」；趙邕的祖父本來葬在平城，趙邕改籍南陽後「喪自平城還葬南陽」。這類新貴有錢有勢，通常還會擔任「故鄉」的太守乃至刺史，佔田佔地，興建家宅，他們有足夠的資源把自己由外來者轉化為本地大族。
決定家族地位的不只是歷史聲譽，還要有相匹配的當世官位與婚姻圈子，新貴家族也都會憑藉自己的權勢強行加入這類婚姻網路。還是以《魏書·恩倖傳》所記的趙邕為例：趙邕把自己攀附為南陽趙氏之後，還希望能打入更高等級的婚姻網路。擔任幽州刺史時，他藉機和著名的范陽盧氏聯姻。他看中的那個盧家姑娘，父親早已去世，叔父替她做主，同意了這門婚事。但是姑娘的母親不同意，而這位母親出自幽州另一名門北平陽氏。為了擺脫盧家叔父的控制，陽夫人帶著女兒回到自己孃家「藏避規免」。趙邕怎肯善罷甘休，到陽家把陽夫人的叔父抓去（可能陽夫人的父親已不在世，叔父當家），動刑拷打，逼他交人，竟然把他打死了。當然這些大家族都有各自的社會資源，也不是好欺負的。陽夫人把狀告到洛陽，朝廷派員調查，查出實情，判處趙邕死刑。雖然趕上大赦，免了死刑，趙邕仍逃不過「除名」，從此再沒有翻過身來。
照宣武帝的設計，高肇兄弟就應遵循這一套路，把自家與赫赫有名的勃海高氏混同起來。今所見高肇家族的所有碑誌，無不宣稱出自勃海高氏。高肇的弟弟高顯，高肇的兩個兒子高植、高湛，以及高肇本人，高偃之子高慶、高貞，都葬在勃海（「德州衛河第三屯」），可見他們的確是向著這個方向努力的。京兆王元愉出為冀州刺史時，可能出於高肇的託請，闢高偃之子、十八歲的高慶為州主簿。那時高慶的姐姐是皇后，他應該是住在洛陽的，但為了建設勃海郡望，寧願到冀州擔任並不重要的本州上佐，以此作為未來正式出仕的基礎。不過，不幸的是元愉在冀州稱帝造反，所舉的旗號就是對抗高肇，殺害了年輕的高慶。
只是高肇粗劣無文，對這種家族郡望建設似乎不太積極（可能他更看重眼前的權力），所以有些事做得不夠到位。比如說，他沒有能把父兄遷回勃海安葬。《北史·外戚傳》記高肇「父兄封贈雖久，竟不改瘞」，宣武帝只好強迫他，「乃詔令還葬」。雖然有皇上這麼大的壓力，高肇仍不肯親自「臨赴」，而是於延昌三年（514）派侄兒高猛到平城「遷葬於鄉」。按照這個說法，高肇最終還是把父兄「遷葬於鄉」了。事實上高猛在平城只是做了一個重新安葬，把封丘修大（高颺夫婦、高琨與高偃，三墳並立，當地人稱三皇墓），把新的封爵寫進墓誌，如此而已，並沒有遷回勃海（宣武帝所要求的「還葬」，是還葬於勃海）。而且，後來高猛也沒有還葬於勃海。正因如此，高肇家族改變郡望的成效不太顯著。據《魏書·北海王詳傳》，元詳與從叔安定王元燮的妃子高氏私通，這個高氏便是高肇的從姊妹。元詳的母親高氏（也許出自真正的勃海高氏）知道後罵道：「汝自有妻妾侍婢，少盛如花，何忽共許高麗婢姦通，令致此罪。我得高麗，當噉其肉。」她稱高肇家女子為「高麗婢」，可見她完全不承認這一家冒牌貨。
高肇家族到洛陽以後的婚姻情況怎樣呢？首先是高肇本人。按年齡來說，高肇在平城時必定早已娶妻，可他到洛陽時似乎復歸單身（起碼是沒有正室），又有了娶妻的需求。他先看重的是王肅死後正在守寡的陳留公主（孝文帝之妹，宣武帝之姑），無奈公主相中的是出身名族的秦州刺史清河張彝，看不上文化不高且家族來歷不明的高肇。《魏書·張彝傳》：「時陳留公主寡居，（張）彝意願尚主，主亦許之。僕射高肇亦望尚主，主意不可。肇怒，譖彝於世宗。」高肇只好向孝文帝另一個妹妹高平公主求婚，這次似乎很順利，終於娶到一個長公主，成了宣武帝的親姑父。
其次是高肇的侄兒高猛。高猛繼承勃海公爵位之後，大概再過一兩年，肯定是在宣武帝本人的促成之下，得尚高照容所生的長樂長公主元瑛。據墓誌，元瑛生於太和十三年（489），比高猛小六歲。和宣武帝及其弟弟元懷一樣，元瑛也是王鍾兒撫養過的。高照容死時，元瑛才七八歲。元瑛長大後除了嫁給高猛，史書關於她的記載非常少，《魏書·皇后傳》有一條記事頗能反映她的為人風格。大概在神龜年間，胡太后率領「王公、嬪、主已下從者百餘人」進到皇家大庫堆放絹布的地方（左藏），讓大家儘自己的力，能拿多少拿多少（「皆令任力負布絹，即以賜之」）。那時北魏貨幣經濟不發達，絹布其實就是錢。長樂公主元瑛以胡太后的小姑子身份，當然也在從行之列。可以想象所有人都是拼老命多取多拿的，「多者過二百匹，少者百餘匹」。陳留公李崇、章武王元融兩個王公大人物，都因為揹負多到力不能勝，雙雙摔倒在地（「所負過多，顛仆於地」）。結果二人都受了傷：李崇傷了腰，元融傷了腳。時人因此為他倆造了一首謠諺：「陳留、章武，傷腰折股；貪人敗類，穢我明主。」所有人中，只有長樂長公主元瑛「手持絹二十匹而出」，既不想表現得過於與眾不同，又不肯拿得太多（「示不異眾而無勞也」），贏得時人好評，「世稱其廉」。
元瑛沒有為高猛生兒子（但不知是否生了女兒），這當然會成為一個繼承方面的問題，但首先的一個麻煩是會在高猛死後的喪事上，缺少一個孝子喪主。高猛比慈慶/王鍾兒早死一年，墓誌記他死於正光四年四月十日（523年5月10日）。據《北史·外戚傳》，高猛臨死，向公主坦白了一個秘密：他在外面還有（至少）一個家，育有一子，一直瞞著公主。《北史》和《魏書》都說這個兒子「年幾三十矣」。高猛死時才四十一歲，其子至多二十五六歲，說「年幾三十矣」大概是為了強調他早已長大成人。如果他的確不小於二十五歲，那說明是高猛在平城時所生，是與公主結婚之前的事情，不知道平城時期的事為什麼還要隱瞞。不管公主聽說之後心情如何，總算解決了一個眼前的難題。於是公主把這個地下狀態的兒子找來，讓他充任孝子喪主。而且，兩年多後的孝昌元年十二月二十日（526年1月18日）元瑛自己也死了，此後大概不再會有人關心高猛的爵位承繼問題。元瑛死在慈慶之後，如果當時沒有生病，她應該參加了老保母的喪事。元瑛墓誌第十五行，有一四字句，除首字「哀」外，餘三字漫漶。仔細讀較好的拓片，可知「哀」後兩字為「子元」。哀子，即高猛臨終所說的那個已經成年的兒子，他的名字是元某。這個兒子不僅做了高猛的喪主，還成了元瑛的喪主。不過後來他並沒有繼襲爵位，可能是因死得早（「尋卒」）。
高猛有一個姐姐或妹妹，嫁給了趙郡李子嶽。據李子云墓誌：「（子云）弟子嶽，字鳳峙，散騎侍郎，妻勃海高氏，父琨，左光祿大夫。」值得注意的是，李子嶽的姐姐李令徽，就是任城王元澄的夫人。據李氏墓誌，李令徽於景明二年九月三日（501年9月30日）死於長安。高猛是元澄年長的幾個嫡子的長輩親戚，這一點在李子云墓誌出土以前尚不為人知。
高肇的弟弟高顯得封開國公，他擔任過高麗國大中正，這個事實說明高肇一家沒有掩蓋自己的高麗背景。高顯先後擔任過侍中、護軍將軍等重要職務，但少有事蹟。《魏書·高聰傳》記宣武帝在河內懷縣表演射箭，射出「一里五十餘步」的好成績，群臣請立碑紀念，領銜上奏的就是侍中高顯。據《魏書·世宗紀》，這次御射發生在景明三年十月庚子（502年11月30日）。《高聰傳》詳載高顯等人的奏文，讚美宣武帝「親御弧矢，臨原弋遠，絃動羽馳，矢鏃所逮，三百五十餘步」，可見皇帝「聖武自天，神藝夙茂」，如此神威足以「肅截九區，赫服八宇矣」，「盛事奇蹟，必宜表述，請勒銘射宮，永彰聖藝」。盛情難卻，宣武帝同意了。「遂刊銘於射所，聰為之詞。」這篇上奏典雅清麗，一定不是高顯自己寫的，而當時高聰擔任給事黃門侍郎，後來御射碑的碑文又由高聰執筆，那麼可以推測，上奏文也是高聰寫的。
史書中高顯再沒有其他表現，而且他也不像高肇那樣留有惡名，可能主要原因是死得早。《魏書·常景傳》先記常景受敕參議修訂律令，時在「正始初」，接著說「世宗季舅護軍將軍高顯卒」，高肇請常景「作碑銘」，時高肇官銜為尚書右僕射。高肇為高顯立碑，請當時以文采著稱的「尚書邢巒、幷州刺史高聰、通直郎徐紇」，加上太常博士常景，一共四人，為高顯寫碑銘。四人各自交稿，宣武帝讓崔光評判四文高下優劣，崔光認為常景寫得最好。崔光感慨道：「常景名位乃處諸人之下，文出諸人之上。」《常景傳》講這個故事當然是為了顯示常景的才氣，但這個故事也足以反映宣武帝對兩個舅舅的愛護。高肇請朝中第一流的四個文士為高顯分別寫碑銘，只用一篇，另三篇作廢，而這四個人竟然也都歡然從命。正始年邢巒為尚書，僅在正始元年（504），因為到這年閏十二月他就奔赴漢中前線了。由此可知，高顯死在正始元年，距他初至洛陽才兩三年時間。
高肇亡兄高偃今可考知者有三女二兒，其中高英即宣武帝高皇后，有墓誌出土。墓誌志題為「魏瑤光寺尼慈義墓誌銘」，可見她出家後的法號是慈義。墓誌：「尼諱英，姓高氏，勃海蓨人也，文昭皇太后之兄女。世宗景明四年納為夫人，正始五年拜為皇后。」高英生一兒一女，皇子夭折，女兒就是建德公主。建德公主後來嫁給蕭寶夤的長子蕭烈，蕭烈的母親就是宣武帝的妹妹南陽長公主。孝莊帝永安三年（530），蕭寶夤以謀反被殺，蕭烈同死，那時建德公主應該還不到二十歲。
高英有個姐姐，嫁給了博陵崔模。崔模的大姐是崔賓媛，崔賓媛墓誌的志蓋文字詳列家人資訊，敘崔模妻室雲：「（崔）模妻滎陽鄭氏；繼室范陽盧氏；繼室渤海高氏，宣武皇帝后姊。」原來崔模有三任妻子，前兩任滎陽鄭氏和范陽盧氏可能早死，續娶了第三任高氏，這位高氏就是高英的姐姐。高肇一家與河北大族聯姻，僅見二例。孝明帝初期，崔模與弟崔楷作為高肇的朋黨被審查，最重要的關聯大概就是婚姻關係。高英還有個妹妹，嫁給了河間王元琛。《北史·文成五王傳》：「（元）琛妃，宣武舅女，高皇后妹。」高偃之子、高英之弟高貞，死於延昌三年（514）七月（見《魏書·禮志》），有碑存世。
史書中可見的高肇家人，還有高肇的兩個從妹，二人是親姐妹，其父很可能是高颺之弟高乘信，他和高颺一起在太和初「入國」。這二姐妹入洛後，妹妹嫁給內侍出身的茹皓，姐姐嫁給安定王元燮。元燮是孝文帝的從叔，嫁給元燮的這位姐姐，就是前面提到的、被北海王元詳的母親斥為「高麗婢」的那位。很可能就是在妹妹家裡，她與常來這裡的元詳相遇相愛。茹皓在孝文帝時期是「白衣左右」，宣武帝即位後「侍直禁中，稍被寵接」，到宣武帝親政後「眷賚日隆」。高肇把自己的從妹嫁給他，顯然是在和他建立聯盟關係。熱衷而貪權的元詳巴結茹皓，在茹皓結婚時「親至其家，忻飲極醉」。元詳認識了元燮的妃子高氏之後，與茹皓更是走得熱絡。《魏書·北海王詳傳》：「詳既素附於皓，又緣淫好，往來稠密。」高氏於元詳為從叔母，事屬亂倫，故史書其事，用了一個「蒸」字。元詳當然也知道利害，所以「嚴禁左右，閉密始末」，很小心地保持著這個關係。
雖然高肇兄弟和那時其他驟然暴發的權勢人物一樣，努力把自己的家族攀附到舊族名門的行列，但高肇似乎在還葬與聯姻兩個方面都不太積極。可能這是因為他們教育水平不高，對郡望建設的意義認識不足，而一味熱衷於擁抱眼下的權力。不過，也可能僅僅是因為歷史給他們的時間還不夠長。