被威胁侮辱后殴打他人

我投诉了一个公交车司机,之后有一次有做上那个司机的车,他侮辱我,并且警告我小心一点,我和他吵了起来,他用中指指着我的连侮辱我,我非常生气,于是殴打了他,他打不过便拿起座位旁边的铁锤要打我,我抓住铁锤,没有受到伤害,他的眼角流血了,后来他报警了,我和他被警察载到派出所,警察把我拷起来,让他去医院做检查,之后警察要我赔偿他医药费,我不知道如果不赔偿会怎么样,于是我赔偿了他,但是我觉得这对我不公平,为什么只惩罚我,他确什么责任也没有,一开始是他现侮辱我,还又中指戳我的脸,我想问下到底我错在哪,他又对在哪?如果我当时不赔偿,结果会怎么样?