第二种形象是“矮化”。“矮化”孔子可以说是自老子开始。孔子当年西行，向老子问礼。老子认为周礼的创始人周公早已死了，要复周礼必须要估量时代潮流是否允许。老子告诫说：“去子之骄气与多欲，态色与淫志，是皆无益于子之身。”（《史记·老子列传》）这说明孔子身上有两大不足：趾高气扬的神态（骄气、态色），过多的欲望与理想（多欲、淫志）。

在《史记·孔子世家》的记载中，有许多同时代的隐士对于“知其不可为而为之”的孔子极尽嘲笑“矮化”之能事。或讽刺他“四体不勤，五谷不分”；或嘲笑他“自腰以下不及禹三寸，垒垒若丧家之犬”；或策反孔子的学生：与其追随“避人之士”（指孔子），不如跟随避世之士（指隐士）；或暗示孔子应改弦易辙，“往者不可谏，来者犹可追也”。《庄子·德充符》塑造了一个肢体残缺名叫“叔山无趾”的人物，向孔子求教并进而论道，最后使得孔子甘拜下风，自惭形秽。这是一个典型的例子，实际上《庄子》一书中还有许多“矮化”孔子的故事。

道家“矮化”孔子在历史上是有传统的。《列子·汤问》编造了一个故事：孔子东游，看见两个小孩在辩论早晨的太阳和中午的太阳哪个离我们近？双方从形状、温度出发各执一词，究竟谁对谁错，“‘孔子不能决也，两小儿笑曰：‘孰为汝多知也？’”实际上这个问题有相当的难度，两千多年后天文学家经过精密的计算后才能得出答案。但孔子不是圣人吗？按照宋儒朱熹的说法：“圣贤无所不通，无所不能，哪个事理会不得？”但是无所不知的圣人对小孩的疑问也不能回答，这不能不说是一种巧妙的讽刺。

第三种形象是“正统化”。自从汉代董仲舒提出罢黜百家、独尊儒术的主张以来，孔子的形象就逐渐趋于正统化。董仲舒声称：“《春秋》大一统者，天地之常经，古今之通谊（义）也。……诸不在六艺之科，孔子之术者，皆绝其道，勿使并进。邪辟之说灭息，然后统纪可一，而法度可明，民知所从矣。”原先对孔子的形象无论是“圣化”还是“矮化”，都是一种民间行为。现在董仲舒借助国家机器的力量，把孔子思想置于至高无上的地位，来强行统一天下人的思想，使之成为一种国家的意识形态。董仲舒极力推崇孔子所作的《春秋》一书，认为“《春秋》之道，大得之则王，小得之则霸”。《春秋》一书具有“大一统”的观点，追求“六合同风，九州共贯”，包含了国家政治版图与意识形态的双重统一。因此，统治者掌握了《春秋》一书的思想本质，就可以称王天下，至少也可以称霸天下。

稍后，刘向《说苑·建本》指出：“有国家者，不可以不学《春秋》。生而尊者骄，生而富者傲，生而富贵又无鉴而自得者鲜矣。《春秋》，国之鉴也。”明确指出《春秋》是统治者必修的教科书。这样看来，孔子到了汉代，在国家政治思想领域已树立了合法正统的形象：他的著作《春秋》是治理天下的一面镜子，孔子本人则是王者之师。