先日、免許取り消しの聴聞の通知が来たのですが、車に乗れなくなるのは

先日、免許取り消しの聴聞の通知が来たのですが、車に乗れなくなるのは聴聞に行ったその日からでしょうか？

ええ。意見の聴取手続きの最初に免許証を預けます。聴取の結果、停止や取消の処分が決定すれば、預けた免許証は返ってきません。つまり、預けるまでは運転できますが、預けたらもう運転はできなくなります。