手を繋ぐ綱が無いと言うのは直接愛情とは関係ないと思います。
問題は、お話が弾んでいるかどうかと言う事や、関心の有る物を見つけた時、それにあなたと一緒に関心を持って接して居て呉れるかどうかと言う事では無いかと思います。
但し、手を繋ぐ事によって、愛情が尚一層深まる事も無いとは言えないとは思いますので貴女から、彼の手を握っては如何でしょうか?
彼が嫌がるなら、別れる事も考えても良いと思います。