自谢霆锋与张柏芝离婚后，两个儿子便一直跟在张柏芝生活，与谢霆锋的见面时间很少。谢贤表示，当初自他出道以来，他与谢霆锋经常三四个月都见不到一面，甚至连电话都不打一通。当被问及对儿子有多少了解时，老爸谢贤半开玩笑半无奈地说：“我跟他一点都不熟，一年都见不到几次面的。”自从1985年5岁的谢霆锋跟随父亲去过东京之后，父子两人将近29年未曾一同出去旅行了。

对于儿子的感情生活，谢贤也一直挂念和关心着。谈起儿子和张柏芝离婚后，两个孙子无人照料，时常面临和谢霆锋痛心离别时，两度离婚的谢贤十分担心和心疼，他害怕儿子会重走他的老路，回忆起这些伤感场面，谢贤在镜头前几度落泪。