上班交班的问题

我现在在一家饲料厂当库管，从这来上班就没有顺当过。对班是个老师傅，刚开始对我很好，慢慢的他说对我有意思，我真的是要疯了。于是我们分开上班了。从此他就变得爱说我的坏话，说我的不是。我上着班真的好累，男朋友就我别干了，可是，我又不想闲着，自己又要用钱，所以还是坚持到现在，就是想三个月能涨工资。自己也每天过的很不开心。虽然他现在很不安逸我 ，我也尽量把自己该做的做好 。他每周星期6耍假，也只有一天。我星期4耍，如果他上白班，我就上夜班，一个星期换一次。我上夜班耍假是上完了班，星期4的早上开始耍的。他这个星期上白班，星期6下午3点就走了。我就要早早的来给他替上。同样他先前也给我替了一天，但是我就要多给他替班，他上夜班就更气人了，直接星期6早上就走了。按理来说他应该星期6晚上上了，星期天开始耍，我一来二去又替他多带了1晚上，这个星期他又跟我换了班，他要星期3下午来上夜班，过几天又星期6他早上又要走。我该怎么跟他说。让他把星期六也上完了在走？我真的好痛苦哦。我不想干了。有时候看着他的嘴脸我就恶心。他跟我的直接领导很好。是个女的。我要不要退出。前不久有一家家具厂招文员，待遇不怎么好。但是不用上夜班，我应该怎么办？希望谁能帮帮我

直接跟你的上级领导提下咯，没效果最好别干了