我和前妻是协议离婚，请问对方这样的行为是否违法

请问律师，我和前妻是协议离婚，规定女方有权在周末探视。在5月9日星期五的晚上，她突然打来电话要求带孩子走（不到2岁），我和她曾经谈过具体时间我们商量，但马上是不可能的，她然后纠集了一帮人到我门口敲门大叫，我报了110，民警对我们进行了调解，考虑到孩子已经被他们抢去并且已经很晚，我接受了民警的建议，暂时让对方带走。请问对方这样的行为是否违法？如果下次还是这样我是否可以禁止对方探视，包括以后？我们协议规定的是周末，周末的具体时间段是什么呢？ 盼复！ 谢谢！