Возможно, этот водитель очень стеснительный и смущается, и вы ему действительно нравитесь, но точно это утверждать не могу.
Самый лучший способ узнать, как к вам относится человек, спросить напрямую. Понимаю, что это не всегда уместно, поэтому можно сначала познакомиться, начать разговор о погоде, например, а дальше станет понятно, расположен он к вам или нет, нравится ли ему с вами общаться или нет.