男性社員との関係が周囲に誤解されていることに悩んでいます。どう振る舞うべきでしょうか。

「ある男性社員と仲良すぎて周りが見えてない。2人の世界になってる。」ってパートのお局に先週注意されました。
でもコミュ障だから私から話しかけることは滅多にないですし、話すと言っても天気の話やニュースの話を1日に2，3回です。
私も男性社員も、お局とは滅多に話さないからだと思います。(お局は私ががコミュ障なので多分嫌ってて最近まで冷たかった、男性社員とお局は馬が合わない)

その男性社員は確かに私にはフランクに話してきます。
私も話しかけられれば、そのフランクさに釣られて結構雑に返してるので楽しそうに見えるのかもしれません。
他のパートさんとも話してるし、ただ単に私がお局に嫌われてて目につくだけかとも思います。

めんどくさいし気持ち悪いです。
男性社員は一回り以上年上なので、そんな対象に見たことは一切ないですが、そう注意されたら話しかけられてもうまく話せなくなりました。

どう振る舞うのが正解なんでしょうか…。

• パート
• 男