人から優しそうと言われます。 人から優しそうとか第一印象が良いと言われます。女性らしいとかフェロモンが出てるとかも。 でも実は優しそうって全然嬉しくない

高校生時代に男子生徒にちやほやされて、それで女子からちょっと距離を置かれたりしたのが少しトラウマなのかもしれません。
いじめられたわけではないですが、未だに同年代や年上の女性の会話についていけないことが多いです。(モテない、男性は若い子にしか優しくしないなど)

自分は優しくされてることが多いから、そういう会話になると黙るしかなくて。

個性なんですね。
仕事の話になると急に目つきが変わって話し方が早くなると言われます。