運転免許証の裏に自分で新住所を書いてしまいました。警察署に行った

運転免許証の裏に自分で新住所を書いてしまいました。警察署に行ったら消してもらえますか？？

消してもらえるもなにも、勝手に公文書を変造する行為ですので、事情聴取され今後二度とこのような事をしないようこってり油を絞られる可能性大。
手続き的には再発行請求するよう指示されるでしょう。

いいえ。これは「免許証を汚損した」として再交付手続きが必要になるケースです。都道府県によっては警察署では再交付申請ができませんので、運転免許試験場に行く必要があるでしょう。

どうせ住所変更する必要がありますのでそこでの対応です。