男の子が二人（小5と小3）いるのですが、弟の方が可愛いと思えません。 真面目で手はかからないけれど、話しかけても「別に」とかのそっけない答えばかり、家族の会話

弟は母親を兄より笑顔にできないと気付いてるから、母親に期待してないのですね。

きっと弟は「お兄ちゃんの方がかわいいと思ってるんだろうな。自分は避けられてるな」と気付いてますね。
なら「母親の感情の届かないところに行きたい。なんなら、誰の感情も触れたくない」と思ってるでしょう。

将来危険ですね。
逆に小五の子が赤ちゃん返りしてるように思えます。
共働きなんでしょうか？
まず、小五の子に厳しくすることですね。
弟はまだ小三ですし、もっと甘やかしてもいいと思います。

なんで好き嫌いで子育てして、年相応の育て方をしないのでしょうか？