可惜孟氏产子之后不久就去世了，儿子只能交给施氏来照顾。施氏自己就有9个女儿要抚养，对这个小妾生的儿子自然没那么看重。因为照顾不周的缘故，叔梁纥的大儿子后来因为贪玩摔断了腿，一下成了瘸子。

　　在当时，残疾的儿子和女儿一样，都不能继承父亲的家业。这下这个好不容易得来的儿子，又聊胜于无了。叔梁纥那时候已经66岁了，可以说半只脚都踏进棺材了。可是他就是不甘心，想要再娶一个小妾，试试看能不能生下一个儿子。于是他又找到当地一家姓颜的，他家有三个女儿，都在婚龄，希望颜家人能够嫁一个女儿给自己。

　　虽然叔梁纥当时年纪已经很大了，但是他官位高，有财力，嫁给他肯定不会吃苦。万一真的生下了一个儿子，那就是叔梁纥的唯一继承人，就算后来他死了，仗着儿子也能过上好日子。于是颜家人想都没想就同意了叔梁纥的求亲，把家里最小的一个女儿嫁给了他。叔梁纥真是老当益壮，婚后没多长时间，颜氏就怀上了身孕，生下了一个儿子，正是孔子。