孔子于是到了卫国，寄住在子路妻子的兄长颜浊邹家中。卫灵公问孔子：“你在鲁国得到的俸禄是多少？”孔子回答说：“俸米六斗。”卫国也照样给了他俸米六万斗。过了不多久，有人向卫灵公说了孔子的坏话，卫灵公就派公孙余假用兵仗监视孔子的出入。孔子害怕在这里获罪，居住了十个月，就离开了卫国。
　　孔子将要到陈国去，经过一个叫匡的地方，弟子颜刻替他赶车，颜刻用马鞭子指着说：“从前我进入过这个城，就是由那缺口进去的”。匡人听说，误以为是鲁国的阳虎来了，阳虎曾经残害过匡人，于是匡人就围困了孔子。孔子的模样很像阳虎，所以被困在那里整整五天。颜渊后来赶到，孔子说：“我还以为你死了。”颜渊说：“老师您活着，我怎么敢死！”匡人围攻孔子越来越急，弟子们都很害怕。孔子说：“周文王已经死去，周代的礼乐制度不就在我们这里吗？上天如果要毁灭这些礼乐制度的话，就不会让我们这些后死的人承提起维护它的责任。上天并没有要消灭周代的这些礼乐，匡人又能把我怎么样呢！”孔子派子一个跟从他的人到宁武子那里称臣，然后才得以离开匡地。
　　孔子离开匡地之后就到了一个叫蒲的地方，过了一多月，又返回了卫国，寄住在蘧伯玉家。卫灵公有个叫南子的夫人，派人对孔子说：“各国的君子，凡是看得起我们国君，愿意与我们国君建立像兄弟一样交情的，必定会来见见我们南子夫人的，我们南子夫人也愿意见见您”。孔子开始还推辞谢绝一番，最后不得已才去见她。南子夫人坐在葛布做的帷帐中等待。孔子进门后，面朝北叩头行礼。南子夫人在帷帐中拜了两拜，她披戴的环佩玉器首饰发出了叮当撞击的清声响。事后孔子说：“我来就不愿见她，现在既然不得已见了，就得还她以礼。”子路不高兴。孔子发誓说：“我假若不对的话，上天一定厌弃我！上天一定厌弃我！”在卫国住了一个多月，灵公与夫人南同坐了一辆车子，宦官雍渠陪待车右，出宫后，让孔子坐在第二辆车子上跟从，大摇大摆地从市上走过。孔子说：“我没有见过喜好道德像这样喜欢美色的人啊。”于是对卫灵公的所作所为感到厌恶，就离开卫国，往曹国去了。这一年，鲁定公死了。