退職した会社の源泉徴収票がない

お世話になっております。
源泉徴収票がないと、給料が振り込まれたときに差し引かれた源泉徴収税額がわからないため、その分のすでに支払った税額を確定申告に織り込むことができません。
何度言っても源泉徴収票が交付されない場合には、以下の源泉徴収票不交付の届出書を所轄税務署に提出すれば、源泉徴収票を出すように元職場に通知が行くので、おそらく発行されるかと思います。発行後当該源泉徴収票の内容・すでに申告した内容を全て踏まえて、更正の請求という税金を還付してもらう手続きを税務署で行うこととなります。
何卒宜しくお願い致します。

【(参考)源泉徴収票不交付の届出】
https://www.nta.go.jp/taxes/tetsuzuki/shinsei/annai/hotei/23100017.htm

やり取りが億劫なため、そのまま手続きしない場合は、本来返ってくるはずの還付金がないだけでしょうか？何か問題はありますか？

お世話になっております。
派遣会社からの給与について、納付漏れが指摘される可能性があります。
あくまでも派遣会社で源泉徴収された税額は仮計算で算出した税額なので、実際に当該収入を確定申告の際に計算したら、本来納めるべき税額が少なかったというケースもあります。
ただ実務上は大きく金額がずれることはないので、リスクとしては大きくないかと思いますが、、

お世話になっております。
上記の回答内容につき追加の不明点等あれば、遠慮なくお尋ねください。
なお上記の回答内容で、ご質問者様の疑問につき解決済でしたら、ベストアンサーに区分いただけますと幸いです。
お手数をお掛けして大変申し訳ありませんが、何卒よろしくお願いいたします。