吴尊家世显赫，来自巨富之家。他的祖父早在上世纪初由台湾金门移民到文莱，落地生根并生下五个儿女。吴尊的父亲吴景添排第二，在汶莱市中心经营房地产公司，地产发展和中介，生意横跨中国和文莱两国。

据说吴尊的伯父吴景进是文莱十大富豪之一。另外，吴伯父还是当地金门建筑创办人，也是《文莱时报》的董事之一。