いじられキャラのくせに負けず嫌い奴

タイトルは自分のこと。
飲みの席でまあ割といじられたりする方で、それ自体はおいしいからいいんだけど、自分の内気な性格とか人格までいじられたらちょっと不快になってくる。
そうなってきたら、こいつら俺のこと馬鹿にしとるな、と感じてしまって俺は慶応を滑り止めで受けて受かったけど蹴ったんだみたいなどうでもいい話をしてしまう。

こんな性格なので高校時代軽いいじめにあったり変な女に引っかかったりしているので直したいのだけど性格なんてなかなか変えられない。
どうやったら変われるのでしょうかね。