房屋无限期租赁合同房主要求搬离，该怎么办？

律师你们好： 我家租赁的房屋先前是从1998年至2003年止期满，又从2003年至2006年止期满，之前都有协议书，每次租金都是一次交清的，然后又从2007年至2008年租赁了两年，钱也交清了，房主说不要写合同了，改个日期就可以了,以后年年交，不限期。房主之前建房子的时候向我们家借了一万元，那时我们已经向别家说好要租赁他们家的房子，于是我们让向我们家借钱的那方要求还我们一万元，你们家的房子贵，我们已经说好要别家的房子了，你们还我家钱，而女房主说：“你就杀了我，卖了我，我也弄不出一万块钱出来。”我们没有办法只好住了下来，在写合同的时候房主说：“这房子只要我不用，你们就住着。”听了他这话我们才安心的住下来，不过房主只是说并没有在合同上那么写。 现在房主又不租赁给我们了，年前二十八我们给房主送租赁钱也没收，年后女房主又来我们家说，房子还是给你们家用，当时给女主人钱也没收，说等天再给，刚安心了两天，又出状况了！！！具了解房主向我们要房子，并不是自己用，而是要给和房主自己一个爷爷奶奶的妹妹家用（我也不清楚是房主大伯家的妹妹还是叔叔家的妹妹，只好这么说了），那我们就不同意了，我爸爸说：“你儿子要用行，你哥哥弟弟要用我都不让，何况是给和你一个爷爷奶奶的妹妹用我更不让。之前你们用着我们的时候，向我们借钱，房子建好了我们嫌贵不租赁你家的，你们却说就是杀了你卖了你也弄不出一万块钱来，现在就是你们用拖拉机拉我们也不搬！” 现在请求律师们帮帮我家，帮我们想想办法，我们不搬对么？要是经公我们能赢么？