赖岳谦的家族，原来可以追溯到周文王。

他的祖先，是周文王的第十九个儿子。他们这一支，是在唐朝的时候，跟随一位平定流寇的武将，迁入福建上杭的。

赖岳谦他们家去台湾，是他父亲年轻的时候去的，而他父亲上小学的校址，就是古田会议的会址。

他父亲在世的时候，也曾多次回到上杭祭祖探亲。他的哥哥和弟弟，也曾多次回乡祭祖探亲。

现在，赖岳谦也回来了，还带着他的二婚妻子周玉琴。