我可以越过中介么?

我在网上看好了一套房子 打电话问才知道是中介,看很喜欢那里的房子,就决定通过中介了 中介让我签了个协议,有一项是不能和房主私下联系 我签了,还按了手印 然后中介和房主联系,带我们去看房 看了不到2分钟,就让我们出来了,没让我们和房主说上一句话 后来才发现,房主不知道他们是中介的,而且房主并未与中介签协议 而且房主对房子要价也没那么高 所以,我们想和房主直接联系,但由于中介签了协议,不知道这种情况我们要承担责任么?