デートの頻度

全然話してよいと思いますし、男性としても迷惑はかけたくないので助かります

本当にしんどいのに無理する必要は無いので、断るのは問題ないと思います。
ただ、当たり前ですが、断られた方はすごいガッカリしてると思うので、「週末の○日ならいけますよ」みたいな代案を出してあげた方がいいと思います。

もしかしたら、断るだけなんじゃないですか？
「ごめんなさいつかれてて、また次の機会に」とか「今日は、ちょっと都合が悪いのでまた今度」とか

正直、相手からそう言われると「あ〜これもうないな」と思います。

あなたは余裕がないので気がつかないのかも知れませんが
相手は、あなたに対して好意があるのに避けられていると感じてしまうのです。

もし、あなたがクタクタで余裕がないのなら、もっと具体的に

「今日は仕事で疲れているのでXX月のXX日に食事に行きましょう」

と言いましょう。

もしあなたが、その相手の事が好きなら絶対にどんなにクタクタでもXX月XX日には食事に行かなければいけません。絶対です。
それを何度か繰り返すと、相手は、あなたが決めた日は絶対行けると安心して、頻繁に誘わなくなります。

忙しい、くたくた、余裕がないなら女性が日にちを決めればイイのです。
男は、好きな女性ならどんな忙しくてもクタクタでも、ご飯食べる1，2時間ぐらい時間作りますから問題ないです。

別に好きでもなく、その彼と付き合いたくない
とかなら、延々今まで通り断り続ければ、自然と離れていきます。