はじめまして。ジョイさん。

少し判断材料が少ないかなと。

ただ、軽々しく家に誘うのは割とチャラいと思いますよ。
友人として親密なわけでもなく、ましてや、恋愛に発展していないなかで誘うのは、自分は男ですが無いです。

観察されたことについてですが、
仕事を頑張ることと、女性に対して誠実であることは違いますし、職場にかわいいこがいたって、好みじゃない可能性だってあります。
気に入った部分もあくまでもその人の一面だということを気を付けられては如何でしょうか。
(当たり前過ぎてアドバイスにもならず申し訳ない)

あとは、書かなくて結構ですが、彼にフラれたときの言葉に何を感じたかではないしょうか。