友達の紹介

男友達が紹介してくれた人と1週間ほどやりとりをし、会う約束をしました。
会ってみて、顔がもしタイプでなくて好きになれそうになかったらお断りしても大丈夫でしょうか？

その際、何と言うのが相手を傷つけなくて済むでしょうか？

過去に別の友達に紹介された人と付き合ったことがあるのですが、
顔だけが原因じゃないかもしれないですが
顔がタイプではなく結局好きになれないまま別れた
ということがあったので。