Skip navigation
DSpace logo

  1. Repositório Institucional da UFPB
  2. UFPB - Campus I - Centro de Informática (CI)
  3. CI - Trabalhos de Conclusão de Curso de Graduação
  4. TCC - Ciência da Computação - CI
Use este identificador para citar ou linkar para este item: https://repositorio.ufpb.br/jspui/handle/123456789/31582
Registro completo de metadados
Campo DCValorIdioma
dc.creatorMoura Neto, Genival José de-
dc.date.accessioned2024-08-27T17:24:27Z-
dc.date.available2022-07-06-
dc.date.available2024-08-27T17:24:27Z-
dc.date.issued2022-06-30-
dc.identifier.urihttps://repositorio.ufpb.br/jspui/handle/123456789/31582-
dc.description.abstractThis work raised the state of the art in the area of data extraction, loading and transformation and analysis of two open-source code alternatives: LoaderNFE and Airbyte. At first, it composts various tools and currently performs the ETL process of the SEFAZ-PB Data Integration Platform project in a non-automated way. Secondly, it proposes an alternative based on ELT processes and has a Web interface for the operation and automation of some tasks. Additionally, the two tools are endorsed in the environment of SEFAZ-PB for extraction, transformation and loading of 33 batches of consumer electronic tax notes, each with 125,000 documents. The objective was to assess the main differences in configuration and operation between the approaches and carry out a comparative study of performance to verify the feasibility of using Airbyte to perform daily synchronization between the operational base of SEFAZ-PB and the Data Integration Platform. The results obtained indicate that Airbyte can be used in scenarios that require an automatic and more frequent synchronization between data sources and destinations, even being slower than LoaderNFE.pt_BR
dc.description.provenanceSubmitted by Michelle Barbosa (mi.2020@outlook.com.br) on 2024-08-27T17:24:27Z No. of bitstreams: 2 license_rdf: 805 bytes, checksum: c4c98de35c20c53220c07884f4def27c (MD5) Genival José de Moura Neto - TCC.pdf: 3802489 bytes, checksum: 6bc615acb9a710a75b2a4668911caf65 (MD5)en
dc.description.provenanceMade available in DSpace on 2024-08-27T17:24:27Z (GMT). No. of bitstreams: 2 license_rdf: 805 bytes, checksum: c4c98de35c20c53220c07884f4def27c (MD5) Genival José de Moura Neto - TCC.pdf: 3802489 bytes, checksum: 6bc615acb9a710a75b2a4668911caf65 (MD5) Previous issue date: 2022-06-30en
dc.languageporpt_BR
dc.publisherUniversidade Federal da Paraíbapt_BR
dc.rightsAcesso abertopt_BR
dc.rightsAttribution-NoDerivs 3.0 Brazil*
dc.rights.urihttp://creativecommons.org/licenses/by-nd/3.0/br/*
dc.subjectDadospt_BR
dc.subjectBig datapt_BR
dc.subjectELTpt_BR
dc.subjectCódigo abertopt_BR
dc.titleUm estudo sobre ferramentas de código aberto para carga de dados de documentos fiscais eletrônicospt_BR
dc.typeTCCpt_BR
dc.contributor.advisor1Kulesza, Raoni-
dc.contributor.advisor1Latteshttp://lattes.cnpq.br/6272616721722861pt_BR
dc.creator.Latteshttp://lattes.cnpq.br/2955725232703134pt_BR
dc.description.resumoEste trabalho levantou o estado da técnica na área de extração, carga e transformação de dados e analisou duas alternativas de código-fonte aberto: LoaderNFE e Airbyte. A primeira é composta de várias ferramentas e atualmente realiza o processo de ETL no projeto da Plataforma de Integração de Dados da SEFAZ-PB de modo não automatizado. A segunda propõe uma alternativa baseada em processos ELT e possui uma interface Web para operação e automação de algumas tarefas. Adicionalmente, as duas ferramentas foram avaliadas no ambiente da SEFAZ-PB para extração, transformação e carga de 33 lotes de notas fiscais eletrônicas do consumidor, cada um com 125.000 documentos. O objetivo foi avaliar as principais diferenças de configuração e operação entre as abordagens e realizar um estudo comparativo de desempenho para verificar a viabilidade de utilizar o Airbyte para realização de sincronismo diário entre a base operacional da SEFAZ-PB e a Plataforma de Integração de Dados. Os resultados obtidos indicam que o Airbyte pode ser utilizado em cenários que requerem uma sincronização automática e mais frequente entre fontes e destinos de dados, mesmo sendo mais lento que o LoaderNFE.pt_BR
dc.publisher.countryBrasilpt_BR
dc.publisher.departmentComputação Científicapt_BR
dc.publisher.initialsUFPBpt_BR
dc.subject.cnpqCNPQ::OUTROSpt_BR
Aparece nas coleções:TCC - Ciência da Computação - CI

Arquivos associados a este item:
Arquivo Descrição TamanhoFormato 
Genival José de Moura Neto - TCC.pdfTCC3,71 MBAdobe PDFVisualizar/Abrir
Mostrar registro simples do item Visualizar estatísticas


Este item está licenciada sob uma Licença Creative Commons Creative Commons