文字だけのやりとりって無機質な感じがするので、
そういうつもりがなくともその言い方だと馬鹿にされているように感じます。
「は？ゲーム？何言ってんの？(嘲笑)」って感じです。

彼は共通の話題を見つけたかったのかもしれません。
飲み会の時も含めてそんな反応だったら、腹も立つだろうし悲しくなります。

もし誤解を解きたいと思うのなら素直に謝罪した方が良いでしょう。
そうでないのなら特に反応せず放置で良いと思います。