パチンコバイト始めたけど、勤務時間が。。

気にしないで、そのまま２３時で帰って良いですよ。
面接の時に言ってるわけだから、自分の生活を守ってくださいね。
でも、すべての人が主さんの状況を把握してるわけではないので、今回のように言われたら、その都度理由は、きちんと説明しましょう。
慣れるまでは、面倒かもしれませんが、分かってくれると思います。
あと、バイトを辞めることは、きちんと２週間前に言えば、仕事始めたばかりだろうと、いつでも辞めることはできます。
今はこのまま、様子をみて、無理ならば、辞めりゃ良いですよ。