孔子出生在鲁国昌平乡的陬（ｚōｕ,邹）邑。他的祖先是宋国人，叫孔防叔。防叔生伯夏，伯夏生了叔梁纥（ｈé，禾）。叔梁纥年老时娶颜姓少女才生了孔子，那是他们到尼丘山向神明祷告后而得孔子的。鲁襄公二十二年（前551）孔子诞生。他刚出生时头顶是凹下去的，所以就给他取名叫丘。字仲尼，姓孔氏。
孔子出生不久叔梁纥就死了，埋葬在防山。防山在鲁国东部，因此孔子无法确知父亲的坟墓在何处，是母亲没有把父亲埋葬的地方告诉他。孔子小时候做游戏，常常摆起各种祭器，学做祭祀的礼仪动作。孔子的母亲死后，就把灵柩暂且停放在五父之衢，这是出于慎重没有马上埋葬。陬邑人輓父的母亲把孔子父亲的葬地告诉了他，然后孔子才把母亲迁去防山同父亲葬在一起。
孔子家境贫穷，社会地位低下。到长大之后，曾给季氏做过管理仓库的小吏，出纳钱粮算得公平准确；也曾提任过管理牧场的小吏，牲畜蕃息。因此他又升任主管营建工程的司空。过了不多久，他离开了鲁国，在齐国受到排斥，在宋国、卫国遭遇到驱逐，又在陈国和蔡国之间被围困，最后又返回了鲁国。孔子身高九尺六寸，人们都称他为“长人”，觉得他与一般人不一样。
