请教律师:我通过中介公司打算买一套二手房,因为当时看房与签委托书的人都是我母亲,也交纳了两万元定金,现在我不想要这个房子了,如果按委托书上的约定,算是我毁约,不但定金要不回来,还要付违约金,这样我损失很大。但问题是房本的主人和卖方人不是同一人,我们提出见房本主人本人,而卖房人和中介都说他们有房本主人给卖房人的委托授权书,并且是公正过了的,我们没必要见房主本人。说我们无理取闹。现在我不管卖房人有权无权,我都不想买这个房子了,我想请问律师,我能要回两万元定金吗?所签订的委托书有很多对买方不利的约定,生效吗?有违约金这一说吗?谢谢!