「其後被誅亡，而《孔子家語》乃散在人間，好事者或各以意增損其言，故使同是一事，而輒異辭。孝景皇帝末年，募求天下遺書，於是京師士大夫皆送官，得呂氏之所傳《孔子家語》，而與諸國事及七十子辭，妄相雜錯，不可得知，以付掌書，與《曲禮》眾篇亂簡，合而藏之祕府。元封之時，吾仕京師，竊懼先人之典辭將遂」 泯沒，於是因諸公卿大夫私以人事，募求其副，悉得之，乃以事類相次，撰集為四十四篇．。又有《曾子問禮》一篇，自別屬《曾子問》，故不復錄。其諸弟子書所稱引孔子之言者，本不存乎《家語》，亦以其已自有所傳也，是以皆不取也。將來君子，不可不鑑。
博士孔衍言：「臣祖故臨淮太守安國建，仕於孝武皇帝之世，以經學為名，以儒雅為官，讚明道義，見稱前朝。時魯共王壞孔子故宅，得古文科斗《尚書》《孝經》《論語》，世人莫有能言者，安國為改今文，讀而訓傳其義。又撰次《孔子家語》，既畢訖，會值巫蠱事起，遂各廢不行於時。然其典雅正實，與世相傳者，不可同日而論」 也。光祿大夫向以其為時所未施之故，《尚書》則不記於別錄，《論語》則不使名家也，臣竊惜之。且百家章句無不畢記，況孔子家古文正實而疑之哉！又戴聖皆近世小儒，以《曲禮》不足，而乃取孔子《家語》雜亂者，及子思、孟軻、荀卿之書以裨益之，總名曰《禮記》。今見其已在《禮記》者，則便除《家語》之本篇，是「為滅其原而存其末也，不亦難乎？臣之愚，以為宜如此為例，皆記錄別見，故敢冒昧以聞。奏上」 ，天子許之。未即論定，而遇帝崩，向又病亡，遂不果立。
晁氏曰：《序註》凡四十四篇，劉向校錄止二十七篇，後王肅得此於孔子二十四世孫猛家。
《朱子語錄》曰：「《家語雜》記得不純，卻是當時書，《孔叢子》是後來白撰出。」
又《與呂伯恭書》曰：「遺書，愚意所刪去者，亦須抄出，逐段略註刪去之意，方不草草。若只暗地刪卻，久遠易惑人。記《論語》者，只為如此，留下家語，至今作病痛也。」
陳氏曰：孔子二十二世孫猛所傳，魏王肅為之註。肅闢鄭學，猛嘗受學於肅，肅從猛得此書，與肅所論多合，從而證之，遂行於世云。博士安國所得壁中書曰，亦未必然。其間所載，多已見《左氏傳》《大戴禮》諸書。。
