你好，昨天我们去看二手房，在中介A处看了一套房，我们说我们再看看就离开了。然后再找另一家公司中介B，中介B带我们看的房中有一套是中介A带过的那一套。后来我们在中介B手上订了那一套房。好巧，中介A知道了，认为我们是在在他手上看的房，然后在B手上成交了。就一直向我们讨要中介费，想让我们付两份中介费，还威胁我们。请问中介A这种不合理的要求我该怎么拿法律武器对付他？