私は体が弱くたまに休んだり遅刻早退します。 体が弱い事は会社のに人は皆さん知っていてくれてとても優しく良くして下さっていましたが、最近皆さんが冷たいというかろ

正直な気持ちを言っていいですか？

はっきり言って迷惑に思います。
だからといって無視はしません、ガキじゃありませんから。
ただそういう人とは仕事上必要な事はやり取りしますが、それ以上の事は関わろうとは思いません。

主さんの事はわからないので当てはめるわけじゃないけど、私も長く働いてきた経験の中からこんなケースを何件かよく目にしました。
身体が弱い・持病がある・体力がない等、こういうのを自ら宣言して遅刻・早退・欠席の多い方って、それらをするのが比較的休日明けであったりという事が多かったです。
休日にはピンピンとしていて遊んで歩いて、仕事始まりにはその疲れを引きずって…なんて人。
ま、こういう人はどこへ行っても仕事長続きしない方でしょうけど。

働かなければ生活していけないのであれば、頑張るしかないんだから、休んだ分仕事で挽回できるように出勤した時は人の何倍も頑張るぐらいの姿勢をみせれば、周りからの圧もそんなに掛からないとはおもいますけどね。