くら寿司のバイトを辞めたいです。

自分は中学生の頃体が悪く、学校に行っておらず、今は通信高校です。初めてのバイトでくら寿司に応募し、週3から4でお願いし、時間を聞かれたので、いつでも大丈夫ですと答えました。ちなみに一年契約？です。約1ヶ月働き、最近は週4の9時間でなかなかの激務で、やっと研修時間を終えました。体力と力はあるので仕事内容自体はキツくないのですが、どうしても黄色い帽子の方とうまくいきません。どんどん精神が削られていきます。 他のバイトの方や店長はすごくいい人です。 やめるならせめて店長や他のアルバイトの人に迷惑をかけたくないのですが、自分の精神状態的にそろそろ限界が来ると思っています。やめるなら1ヶ月前に連絡をしようとは思っているのですが、初めてのバイトでどうすればいいのかわかりません。もちろん甘ったれていて契約を守らず非常識な事をしていることは分かっています。でもここで続けてしまうとやっと治ってきた体も中学生の頃に戻ってしまいそうで怖いです。だれかアドバイスをお願いします。