我该怎么办？

本人初中生
前几天班上组织结对子，我和一个玩的还可以的女生结到一起了，他来辅导我。
因为家离的近他之前会来我家找我，说是教我学习，说白了就是看我的小说。
我很不喜欢把我的小说借给别人，包括给别人看。但他很强势，他就一直强迫我，说什么我不借给他他就来我家直接拿。我不给他会来打我的头，之前有跟他的家长说过这件事情，但是他的家长好像都没有把这件事情放在心上，还是这个样子。
过几天不是国庆放假吗，他说他要每天来我家里＂督促我学习＂，我非常不喜欢别人来我家，那样我会觉得很不自在。再说了我本来就讨厌他的自大，他总是会在我的身上找优越感因为学习比我好，还会嘲讽我的身材，但我还是得明面上跟他维持好关系。
我跟他讲我国庆前几天可能会出去玩，而且我有时候下午要去画画，总之就是委婉地让他不要来找我，谁经得住你天天来打扰的，他倒是很不爽，反过来说我天天只知道玩，我当时就很生气，我说老师是让你来辅导我学习的，不是让你来管我的私生活的，我的假期我是有理由自己去支配的。
他真的很爱多管闲事，各种事情都喜欢去管
他又开始不爽了，一副很高傲的样子跟我讲什么不玩了解绑吧，就搞得是我求他来辅导我一样，我就跟他讲解绑就解绑。
他不知道去老师面前说了什么，老师就开始说我不思进取糟践人家的好意，又开始借题发挥说我作业没有好好订正，还有心思跟我开玩笑，说什么，你是喜欢不思进取这个词还是不求上进呢？
我当时就急了，我跟他讲我没有不思进取，我只是不喜欢他像我妈那样管着我，老师就跟我讲他那样管着你不好吗？
不好，非常不好。
说什么你们才结了一两天就掰了，要付违约金（班上定制的币，反正就是很难得）说主要的错还是我，要我付更多的违约金。
我说你之前怎么都没有说解绑要违约金呢，他说合同就是这样。
他就开始一直说我了，总的就是疯狂维护那女生，所有错事都是我的，我糟践了人家的好意。
我当时就跟他讲，不赔钱。
后面他又说什么七七八八的，还有对我很失望。我真的已经不想再去辩解什么了，他不知道里面的内情，可以，但是为什么要这么不分青红皂白地指责我？都不愿意听我讲
而且之前的女生跟我讲，只要你把小说借我就不去找你，这不就是想要小说吗，但是我真的很不愿意
所以我也懒得去辩解了，反正他们也不会信，我想过老师的好，但还是比不过我心里的怨怼。
这件事情我一直耿耿于怀，已经两天没睡好了，希望能有人能来开导一下我，谢谢