「若いのにそんな仕事していて勿体ないね」「若いのにこんな仕事してて偉いね」とよく言われる職業についてますが、世間体のために辞めるべきですか？

辛くても後悔してないと思ってらっしゃるんですね！
それってそう簡単に言えることではないですよ。
それに仕事を生きがいにして仕事のために生きてる人も中にはいるのかもしれませんけど、忘れてはいけないのはあくまでも自分が幸せな人生送るってことが１番人生で優先すべきことだと思うんです。仕事はそのための道具に過ぎないというんでしょうか。その道具だって１つしかないわけじゃないし、何を使うか、何から使うかなど使い方によっても全然違うし、いくら万能なすごい道具でも使いこなせなければ意味がないし、そのためには訓練も必要でしょうし、色々やり方はあると思います。

誤解のないように、公務員全てがそうではないですよ！！
逆に残業が多いところもあるみだしですから。

かっこいいなんて言ってくれて嬉しいです。
世間体で言えばそんなみなす進んでやりたい仕事ではないし人気のある仕事ではないし、人の出入りも多い業界だし、あまりイメージは良くないかもしれません。私もこの仕事が好きだと心から思えるまでいろいろありました。向いてないなって何度も思ったことありますしね。
でも、好きだから続けてこれたんだと思います。

主さんはどんな人生にしたいのか。どんな働き方をしたいのか。すぐに答えは出なくてもいいし常にそこを意識しながらいろいなことに取り組んでみるとまた違った景色が見えるかもしれませんね！
とにかく、世間体なんてたいしたものじゃないです。世間体で皆が良く思うような称賛されるようなことをしたからと言って、本人が本当に幸せかどうかは全く別だと思いますけどね。
誰もが羨むように見える人でも、事件起こしたり、自殺して亡くなったり、人の幸せなんて本人にしかわからないものなんだと思います。