Yo la verdad es que eso lo veo cogido con hilos, y en un contencioso se gana seguro, porque a ti te dan autorización para residir en X localidad porque estás destinado en Y Puesto; no es una autorización libre y permanente, sino que va en función de una variable, que es tu destino.

En mi opinión, cuando alguien cambia de destino, debe solicitar nuevamente la residencia fuera de la Unidad, porque las circunstancias en base a la que se concedió originalmente la autorización han cambiado.