発達障害画をもっています。 障害者雇用で働いいています。 仕事は普通にできるので少し話すようにしたら話せたり話せなかったりで、周りと衝突？するようになっ

衝突したのは健常者の同僚でしょうか。
たぶん主さんの反応に「何よ、私をバカにして」みたいになったんですかね。

障害を開示するかは本人の自由です。
主さんがその仕事を続ける気があり開示が嫌でなければ、上司(と登録支援機関があれば、そこのスタッフに)相談して、上司同伴で衝突した同僚に「障害ゆえの反応でありあなたをバカにしてないし、仕事を疎かにしたわけではない。開示が今回になったのは、どこまで開示するのが仕事としてベストか迷っていた」と説明した方が良いと個人的には思います。