私有地（工場等）で独自の交通ルールを決めて、違反したら警告書と違反

私有地（工場等）で独自の交通ルールを決めて、違反したら警告書と違反点数を課します。点数が累積5店になったら、入構許可証を没収しますとか書いてあるんだけど、これは運転免許証の点数とは無関係なんですよね？
そもそも、国家権力（警察）でもないのに、取り締まる権限がどこにあるというわけ？補足https://www.naa.jp/jp/b2b/cargo/pdf/koutudousen.pdf

運転免許とは関係ありません
『国家権力（警察）でもないのに、取り締まる権限がどこにある』かといえば
私有地内の道路だからですね
相談者様も自分の土地の中だけなら自由に規則を決めれます

某ラーメン屋での店のルールを守れない人は入店禁止と同じ。

自動車の生産工場で働いた時は、構内は自動車優先で歩行者は自動車に道を譲らないとダメな存在でしたよ。
私有地に立入許可を得ているのですから、その構内の独自ルールを守らないと出禁になりますね。

運転免許証は、無関係です。

工場の従業員であれば会社規則によって評価や罰則があるのは普通の事
下請けや出入り業者なら発注者に評価され場合によっては出禁もありえる
質問者さんがお客さん側なら、常識の範囲内なら多めに見てもらえるかもしれませんね

出入りの業者を選択する権利は工場側にあります。