卖方是业主的父亲,签合同无授权委托书,合同有效吗?4月19日,我通过一中介公司与卖方签订居间合同,当时

卖方是业主的父亲,签合同无授权委托书,合同有效吗?4月19日,我通过一中介公司与卖方签订居间合同,当时代理人说她女儿要上学没有时间过来签合同,中介说是他认识的人,没事,也相信他,就签了合同,并给了2万定金，因为是约定一次性付款,现在钱没法到位,加上新出政策与对房价下跌预期，签到我决定放弃购买，请问，我可不可以以当时签合同时，签字的人没有业主经过公证的委托书，为理由，此合约无效，拿回定金，谢谢