遭遇租房合同纠纷，如何处理？

十月份，我看中了一套出租房，当时房主还没有搬走，中介说房主10月10日之前一定搬走，于是中介就代房东与我们签定了租赁定金协议。协议中约定，我们交给房主2000元定金，如果房主违约，应双倍返还定金，即4000元，而我方违约，则无权要求返还定金，并在协议中约定12号之前与房主签定正式租赁合同。当时签定定金协议后，我就交了2000元给中介。
但是，到了12号，房主却因为各种原因无法交房，也不来签定租赁合同，按照定金协议的约定，房主应退还我2000元，并赔偿2000元的违约金。可是房主却说，当时他没来签协议，是中介代签的，他并不确定中介是否收了2000元定金。
现在我该如何维护自己的权益呢？
补充：当时中介说房主很忙，已经全权委托他与我们签定定金协议，并收取定金，所以我们才放心地把钱交给了中介。后来才知道，当时房主并没有确定何时交房，只是中介想当然地擅自做主。