'Se não tivermos outra opção, vamos levar à Justiça', diz pai de crianças obrigadas a deixar o Reino Unido