Rafael
Perder os direitos você não perde porque não irá cancelar seu cpf, basta que faça a declaração de isento quando estiver no Canadá, mas resgatar antes do prazo de 3 anos, creio que seja impossível. Também, não poderá nomear procurador para sacar o dinheiro: isto é o Brasil!!!
Contudo, te aconselho a procurar um gerente da CAIXA.