秀才娘子的锦绣年华:我应该出手进攻吗？（请别开我玩笑，我很信任大家）

情况是这样的：我和我一个同学的朋友一直有些矛盾，但我们都没有什么过激行为，偶尔电话里争论，而且都是他打过来质问，电话里我也不太让着他，虽说我平时都会忍让别人，我是吃软不吃硬。毕竟都这么大了，大多时间井水不反犯河水。但最近据说他考试不很顺利而且他听到有些话语描述是我对他如何如何不利，如何如何不识抬举等等，就开始明显找我碴，打电话还说要来找我。电话里我仍是3分让7分顶。后来他打电话找我，说和我谈谈，我一听就知道他想干什么，于是就换上运动服去了。果然我们见面后没说两句他就很激动开始推搡，骂的话也很难听。事发地在我学校门口，这地方是他约我来的。总得来说不利于我用他的“方式”解决问题。（顺便说一句，格斗是我唯一的体育爱好，本人学习5年跆拳和3年散打。有时代我老师给学生上课，同时带校跆拳道队。这就是我的体育活动，就像其他同学打篮球一样）
在当时的情况下我是这样想的：在学校动手会让我今后有不少麻烦，影响恶劣。而且门口还有校卫和警车。但光让我防卫我又不甘心，让他以为我怕他，日后更目中无人，这次真想趁机好好让他认识一下自己和我。当他打来时只会用右摆拳，很好处理。警察还是发现我们，询问我怎么回事，我就慌称他是我自己同学，心情不好吵嘴。然后带他窜到学校深处。我明显知道他还没有发泄完。但只看到他很长的混乱拳脚后只踹到我大腿一下，就坐在一边又开始喘气和难听的骂人。整个过程中我只是自卫式的做了两个后踢在他肚子上防止他离我太近，还有一拳很小心的打他嘴上防止他出拳打我头。他骂了会儿就说不会再找我然后就去洗嘴了。我现在的问题就在：我觉得这次我是很礼貌的受他“邀请”去让他发泄了一次，让他白白骚扰我一次，我心里有些窝火。请问各位高手：就这次冲突来讲，我是不是表现太软弱了而会使他更嚣张呢？如果他有意无意又来骚扰我时，我是否该放开一些呢？PS：我不去找专门他应该是没什么考虑的，就请大家说说他再找我的对策。真诚的听大家的看法。请相互尊重。祝大家快乐。
我们都是男的。多谢各位。