仕事内容や環境の変化が凄く苦手と言うか恐怖心があります。 やる仕事が変わるだけで、ついていけなくなったり、頭がこんがらがってどうしていいのかわからなくなります

そうでしたか！
ご自身のこと、完璧とは言わなくてもちゃんとわかってるんですね。ちゃんとご自身と向き合ってこられたんですね。それってすごいことですよ！！
普通なかなかそういうことできませんから。自分のこと棚に上げて人のことばかり責めて自分を守ろうとするので。自分と向き合うことってつらいことでもあるので。

辛くて苦しいけど、でも他の選択取るよりは今が楽で安心。そういうことってありますよね。
私もそうです。パワハラされてた時、仕事辞めるよりもパワハラされてる方が楽で安心でしたから。それくらい辞めるのが怖かったです。辞めるのは逃げだという思い込みもありましたしね。
今思うと、さっさと辞めればよかったなと思いますが、でも当時はそうすることしかできなかったしよく頑張ったな！ってむしろ誇らしく思ってますけどね～。
でも、今の私がその当時の自分に戻れるなら、堂々と迷わず辞めるでしょうね。もっと選択肢はあるしもっと世界は広いということを知ってるので。無知だったからこその苦しみでもあったわけです。

部下たちがどうのこうのは１番大事な問題ではないです。
それよりも、主さんは今の仕事に対してどれだけ向き合ってやってこれたかって言うこと。いい加減に適当にやってきましたか。人の迷惑考えず自分のことばかり優先してやってきましたか？
おそらく、主さんはそういうタイプではない気がします。不器用なりに主さんなりに精一杯頑張ってきたんじゃないですか？
部下が何もやてくれないということ社長には相談しましたか？
それでも部下は何もやらないなら、社長の言うことすら聞かない部下となりませんか？
それだけ仕事ができるなら良いですが、それによって弊害が生まれるなら解雇の対象になってもおかしくないです。
どちらにしろ、部下よりも主さん自身です。主さんが今の仕事に対してどう向き合えるか？
でも、もうやめたいんですよね？それが本音なんですよね？
だったら、そのための行動してみませんか？
ネットで求人探すことは誰にでもできますし、もっと本格的に行動されてみてはどうでしょうか？面接してみるだけでもまた違うかもしれませんしね。今の状況を変えたいと思うなら他人ではなく自分から変わっていくしかないです。すべては主さんが幸せな人生送るためです。