大型特殊自動車や小型特殊自動車の免許を持っている人は珍しいと聞きますが

大型特殊自動車や小型特殊自動車の免許を持っている人は珍しいと聞きますが本当ですか？
レア免許なのでしょうか？

大型特殊免許（一種）は、珍しい免許ではありません。
ですが、大型特殊免許は「重機などの特殊車両を公道で運転するための免許」なので、作業のときはクレーン車やフォークリフトなどの作業資格が必要になります。
大型特殊免許も四輪免許なので、普通免許がない者でも取得から3年以上経過していれば、大型免許・二種免許各種の受験資格を得ます。大型免許や大型二種免許を取消・失効になった者が再取得するとき、いったん大型特殊免許を取得してから、過去に四輪免許を3年以上所持していたことを証明する運転免許経歴証明書を用意してから大型免許や大型二種免許を取得する例があります。

小型特殊自動車免許は、原付免許と同様、普通免許・普通自動二輪免許・大型特殊免許の下位免許になります。小型特殊免許のみの者は全国に約5万人しかいないはずです。他の免許を所持している者（併記）でも100万人未満です。
小型特殊免許の所持者の大部分は高齢者ですが、農作業・農業高校の実習のように本当に必要な者が取得する例は少ないでしょう。
小型特殊自動車免許取得者の大部分は、免許の「小特」欄を埋めたい免許マニアだと思われます。
私自身も、普通免許の下位免許である小型特殊免許と原付免許を所持しています。

重機を扱う人であれば必要。
そうでない人であれば、珍しい
というのであれば、納得しますが。

大型特殊ではなく大型特殊二種持ってますが結構少ないと思います。

レアと言うより、必要が無いから取らないのです。
大型特殊を必要とするのはクレーン屋とか重機屋くらいです。
小型特殊は普通免許が有れば必要ありません。
大型特殊の試験は比較的簡単です。

大特はそうでもないと思いますが、小特はねえ…多くの人が普通免許を取ってしまいます。
先に普通免許を取得してしまったら、小特は取得できません。普通免許があれば小特車両の運転は可能ですから、取得する必要がない。
もっとも取得しようとする人もすくないでしょうが、取得できない人が多いということで、レアなのかもしれません。

レアと言う程ではないと思いますが、少ないのではないでしょうか。
小型特殊は、従兄の3人が家業が農家と言う事で持っていますが、友人関係では一人も居ません。
大型特殊は、嫁さん以外、親戚、友人誰も持っていません。