仕事が何年目かによりますかね。あと仕事をやめる時期。
一体何が辛いのか僕には質問者さんと同じようには理解できません。でも、一時の気の迷いというのもあるので、今一度よく考えてみてはいかがでしょう。
それでも答えが出ないようなら会社の先輩などに聞いてみてください。きっと同じように悩まれていた時期があるのではないでしょうか。