互いの距離によりますね。私は気にしませんが気にする人は気にしそう。
付き合って長かったり、元々気心知れた仲とかなら気にしないとは思いますが、なんにせよ迷うくらいなら相手と相談した方がいいのでは…と思います。一意見ですので参考程度に