>それって、その同僚に気があって話をしにやっぱり行っているのでしょうか？

その可能性は高いと思います。
よほど趣味が合っていて、その話をできるのがお互いだけとか、
元々友達だったり親類だったりというなら別ですが。

そうでもないのに、会社で、しかも毎朝、特定の異性のところに言って話しかけるなんて、気があるからとしか言えないと思います。


>それとも、自分の考えすぎなのでしょうか？

会っている可能性が高いと思いますが、考えすぎの可能性もあるので、どちらとも言えません。