返信の早さイコール愛情？違うの？

この話だけで、彼が信用できるかどうかは分かりませんが、
メールの返信の早さと愛情とは、なんの関係もないと思います。

それは単に、メールが好きか嫌いか、マメかマメでないか、だけの話です。
メールは、ただの道具です。
使い方は、人それぞれ。
道具に振り回されてはいけません。

メールの返信の早さより、直接会っているときの彼の様子をよく見てはいかがでしょう。
声の調子や視線の配り方、クセや仕種など、ヒントになるものはたくさんあると思いますよ。