「あなただけが悲しいわけじゃない」とか「あなたより辛い環境にいる人もいる」とかを慰めの言葉とするのどう思いますか？ 私は自分が苦しい時にそんなことを言われたら

そういう言葉をなんにも考えずに使う人って、だいたいが人の話をろくに聞いてないですよ。
めんどくさいからそういう言い方で追い払っているだけです。
「めんどくさいからよそに行け」なんて言ったら自分が悪者みたいになって気分が悪いんで、他人に責任をかぶせているだけですよ。

本当に甘ったれたことばかり言っている人や、まさに自分だけが悲しいんだみたいなことを周りの人の気持も考えずに口にしている人がいれば、そういう言い方をするのもありかもしれません。
ですが基本的には突き放す言い方ですから、最初にも書きましたが相談を受けたときに「なんにも考えずに」やみくもに使っていい言葉ではないと思います。