パスポートを無効にしたらいいんじゃ無いの？
その時点で相手国にとっては不法滞在者になるわけだし・・・(´・ω・｀)？