process_sim(.) reportando erro para anos entre 1999 e 2001

[thiagocalm]

Estou tentando importar dados de declaração de óbito para todas as UF's, entre 1999 e 2001. O código que estou usando é o seguinte:

dados_sim_00 <- fetch_datasus(year_start = 1999,
                           year_end = 2001,
                           information_system = "SIM-DO")

dados_sim_00 <- process_sim(dados_sim_00, municipality_data = FALSE)

Entretanto, é retornado o seguinte erro no momento de processar os dados:

Error in process_sim(dados_sim_00, municipality_data = FALSE) : 
  invalid multibyte string at '<b2>'

Fiz alguns testes rodando para somente uma UF aleatória para o mesmo intervalo de anos calendários e o erro não é retornado na função process_sim(.).

Até onde consegui entender, parece ser um erro associado a algum dos caracteres relacionados aos dados de alguma UF em específico, imagino. Entretanto, não consegui identificar onde ele se encontra.

Alguém tem alguma ideia ou alternativa para este erro? Ele já ocorreu outras vezes?

[rfsaldanha]

Acho que já vi esse erro antes, mas precisaria saber exatamente qual UF e ano para reproduzir o problema. Você consegue sinalizar qual é a UF/ano?

…

Em 17 de fev. de 2023, à(s) 13:24, Thiago Almeida ***@***.***> escreveu: Estou tentando importar dados de declaração de óbito para todas as UF's, entre 1999 e 2001. O código que estou usando é o seguinte: dados_sim_00 <- fetch_datasus(year_start = 1999, year_end = 2001, information_system = "SIM-DO") dados_sim_00 <- process_sim(dados_sim_00, municipality_data = FALSE) Entretanto, é retornado o seguinte erro no momento de processar os dados: Error in process_sim(dados_sim_00, municipality_data = FALSE) : invalid multibyte string at '<b2>' Fiz alguns testes rodando para somente uma UF aleatória para o mesmo intervalo de anos calendários e o erro não é retornado na função process_sim(.). Até onde consegui entender, parece ser um erro associado a algum dos caracteres relacionados aos dados de alguma UF em específico, imagino. Entretanto, não consegui identificar onde ele se encontra. Alguém tem alguma ideia ou alternativa para este erro? Ele já ocorreu outras vezes? — Reply to this email directly, view it on GitHub <#64>, or unsubscribe <https://github.com/notifications/unsubscribe-auth/ABN3JA3UNTJTE3O53HRWKTDWX5UYNANCNFSM6AAAAAAU7LYUQM>. You are receiving this because you are subscribed to this thread.

[thiagocalm]

Até o momento, não consegui identificar qual a UF/ano em específco associado ao erro. Mas vou tentar avaliar separadamente por ano e fazer alguns testes para UF's em específico também.

O que me fez suspeitar de ser o problema em alguma UF foi por ter rodado para os mesmos anos (1999 a 2001) para a UF de MG e não ter sido reportado este erro.

[thiagocalm]

Consegui identificar que o problema ocorre no ano 1999 para a uf de Sergipe (SE).

[rfsaldanha]

Compreendo. Outros usuários do pacote estão encontrando problemas parecidos em outros arquivos de outros sistemas. O ideal seria tratar cada variável com a função enc2utf8 antes do processamento.