発達障害で仕事を４回目のクビになりました。 　理由は私が覚えが悪くどれもできてないからだそうです。 　どこへいっても 人の倍がんばってもダメでした。

精神科の先生に、今の主さんの気持ちをきちんと話せてますか？
今の主さんの状態、仕事だけじゃなくて、家での状態、主さんのもう家に引きこもりたい気持ち…
全部、先生に話してみて下さい。
話してみて、精神科の先生がただうなずいている状態なら、障害年金を取り扱っているセンター等に行き、社労士の先生に、相談してみるのもありだと思います。
始めの相談だけなら、無料の所もあるので、ネット等で探してみて下さい。