私はまだ社会人になってないのでちゃんとした答えは出せないですが、精神的に辛いなら今の職場を休職するか、転職先を見つけてから辞めるかの方がいいと思います。もし休めないのなら、心療内科に通いながらというのも手だと思います。
職場の雰囲気が合わないのであれば、まずは上司に相談したりするのがいいかもしれません。
「3年は続けたほうがいいのか？」については、頭の中で3年間自分が耐えられるか考えてみてください。将来の自分に希望が持てなかったり、どうなっているかわからないといった場合には職場を一旦見直したほうがいいと思います。
長文になってしまいましたが、まとめると
①精神的にヤバいとき
　休職or転職　休めない時は心療内科を活用！
②職場の雰囲気が合わんとき
　まずは上の人に相談！
③3年間続けたほうがいい？
　自分が3年間耐えられるか脳内シュミレーション！
　↪︎大丈夫な気がしない…とき
　　職場を見直そう

個人的な意見ですので、詳しくは言えませんが少しでも参考になれば幸いです。