知人の紹介で知り合った人

知人の紹介で知り合った人と２回、二人で会ってきました。

最初は知人と一緒に三人で食事をして、その時はちょっといいなと思ったので、二人でお茶をしました。初めて二人で会った時に、何となく合わないかもと思ったのですが、１回では分からないかもと思い、もう一度会ってみました。
しかしやっぱり何となく合わないと思い、また次に会いたいと思えません。
何か嫌なところがあったわけではないのですが、何となく違うなと思ってしまったのです。
ただハッキリとした理由がある訳でもないので、お相手の方と知人にどのように伝えればいいのかわかりません。このような場合、どのように伝えればいいのでしょうか？