精神科の医者に怒鳴られるってことありますか？ 職場で罵倒され続けたからなのかうつ状態になり通院してる病院で、最初会った時からいかにも大先生って感じのご老人で、

最終的に薬を抜かないとまともに社会での生活は出来ないのだから主さんはちゃんと正解を選んでいる。本当は薬を飲まない方が後々苦しまない。

薬を飲まない=金にならない。それが答えでしょう。
精神系の薬は依存性が強く、飲み続けないと離脱症状が現れます。飲みだしたら飲み続けないと体や感覚がおかしくなるので精神科から離れられなくなる。その精神科医からみたら薬はお金、それを拒否する人はいらない(患者としてみない)ってことだと思います。

病院はやめて、なるべくならカウンセリングのみか自力での復帰。がいいですよ。