我今天在A中介看了房,但是没有决定,就想过几天再看看..10天后就去B中介看了同一套房子,问下价钱,说商量下,后来家里人也想看,就联系B中介去看房,都比较喜欢,叫B中介去谈谈,但是他们没有谈托,就去A中介问了,条件都可以谈好,就在A中介定合同了..过几天B中介就打电话来说叫我们赔中介费给他,说我们不跟他买,还找其他人来说:如果你现在给我们5000元就算,不然就不止这个数了.我怕我住进去后,B中介会找人来骚扰我.我应该怎么办呢?