金兀术是能与岳飞媲美的大将之才，但是他的家庭却并没有岳飞那么幸福，岳飞有李娃在其身边相濡以沫。金兀术就要孤家寡人得多了。他在历史上甚至没有记载有亲生儿女。
事关金兀术的妻子，一种说法是他没有妻子，只是强占妇女，其中有这么一个女子——仪福帝姬赵圆珠，宋徽宗的第九个女儿，母亲为懿肃贵妃，据说她在靖康之变爆发之时，才17岁，还没有出嫁，靖康之变后，北宋被灭，她被四皇子完颜宗弼所占。之后就再也没有她的记载，连卒年也毫无头绪，更别提其为金兀术留下一儿半女。
野史中，有传闻说金兀术与秦桧老婆王氏相恋，当然这段恋情在正史中没有任何记载，但民间传得颇为火热，估计是因为王氏以年轻貌美著称，被俘虏到敌方居住地，按照古代游牧好斗民族的特性，不发生点什么，还真对不起观众。清朝人写的《说岳全传》其中描写：金兀术在一个树林里发现了正在洗衣服的王氏，一看就是南方人，长的还很好看，颇有一番风情。一时性起，也不和秦桧招呼一声，直接就上了。秦桧知道后，也没啥意见，囚犯一个，能说什么呢？更何况，自己的老婆还挺喜欢金兀术的，认为金的身体很粗壮。在《说岳全传》对这段奸情写的不多，在更早前明代的戏曲《精忠旗》，对此做了详尽的描述。
关于金兀术的儿子，则记载得更少了，这么一个征战四方的女真族的英雄，居然都没有在史书中留下一儿半女。有人说完颜金蝉子是兀术的儿子，但其实金蝉子是完颜宗翰（粘罕）的第二个儿子。粘罕是撒改的儿子，金兀术是阿骨打的儿子，两人是堂兄弟的关系，表哥粘罕都有个出名的儿子，兀术却没有任何记载。书上说：“你道那殿下是谁？乃是粘罕第二个儿子，使两栖铁锤，有万夫不当之勇。”“那金弹子把锤架开锏，一连三四锤，打得牛皋两臂酸麻，抵挡不住。”他七八合败董先，十余合败余化龙，二十余合败何元庆，四十余合败张宪，八十余合令岳云招架不住。完颜金蝉子战败得颇具戏剧性，当时他与岳云大战八十回合，完全压制住了岳云，当时牛皋看见形势不利，急得像热锅上的蚂蚁，赶紧大叫：“我侄儿不要放走了他！”结果金蝉子以为是自己的叔叔兀术叫他，便回头观望，这一分神就被岳云打中肩膀，落下马。
连野史中都记载，金兀术没有一个亲生儿子，但唯一的不同是有一个养子——陆文龙。陆文龙是宋朝潞安州节度使陆登的儿子，在金兀术攻陷潞安州之后，陆登夫妇便双双自尽殉国。金兀术将还是婴儿的陆文龙和奶娘虏到金营，并将他收为养子。而且也被金兀术教导成为了一员猛将。曾多次与岳家军直面对垒，秒杀呼天宝、不到十回合杀呼天庆，以己身单枪匹马，连挑岳云、张宪、何元庆、严成方等几位大将，丝毫不见疲色。但是他的身份总归是有暴露于天日的一天，岳家军的王佐为了劝陆文龙归降，自断左臂，诈降于金兀术，说服陆文龙的奶娘，抓住机会向其讲述了身世。可惜了兀术养了多年的儿子，在得知义父是自己的杀父仇人之后，抛弃几十年的养育和教导之情，誓杀金贼。孰对孰错根本没办法定论。可怜兀术野史中才有的儿子，最后也离他而去。