但事与愿违，齐衡和明兰并没有在一起。明兰是庶女，虽然齐衡并不在意明兰的出身，可是在那个年代，儿女成家都必须门当户对，齐衡的母亲极其反对他们的婚事，认为他们之间的距离相差太多，而齐衡为了能够和明兰在一起，不惜用自杀的方式来逼迫母亲妥协，可是他的母亲却说，如果齐衡死了，明兰也活不了，所以最后只能与明兰分手，娶了别的女人。

其实，齐衡并不是懦弱，而是他的身上背负太多，即使他与明兰是真心相爱的，但是没有家人的成全这段婚姻是没有结果的。而明兰也知道自己与齐衡没有结果，便放下了这段感情，嫁给了顾廷烨。

小说中，齐衡前前后后娶了三任妻子，只是都不幸去世。最终，齐衡决定不再娶妻，一人到老，只能说有些可惜。齐衡没有迎娶心爱之人，这是他这一辈子最后悔的事情，就连齐衡死的时候，也是带着遗憾离开人世的。不过在原著番外篇中，齐衡的孙子最后和明兰的孙女在一起了，这也算是间接了了齐衡与明兰没有在一起的遗憾。