活動時間が

現在マッチングしている人と活動時間が合いません。
その人は仕事が夜遅くまであるようで、私がそろそろ寝ようかな…と思った頃合いに「いま帰宅しました！」とメッセージが来ます。

メッセージのやり取りをしていて翌日の仕事に響くのも嫌なので早々に切り上げて寝てしまうのですが、もしこの先お付き合いすることになってもこういったすれ違いでうまくいかないかな、と考えてしまいます。

スパっと諦めてFOさせるべきでしょうか？