| |
| Acadêmico(a): Diego Paulin |
| Título: Sistema para Carga de Dados em Data Warehouse |
| |
| Conclusão: |
Já existem ferramentas específicas no mercado que executam o processo de extração, transformação e carga de dados em DW, porém as ferramentas analisadas pela FEESC não possuem interface web que possibilite executar o processo de carga online, sem a necessidade de deslocar seus profissionais. A principal vantagem oferecida pela ferramenta desenvolvida neste trabalho é a possibilidade de configurar e executar os processos de extração, transformação e carga de dados online, reduzindo de forma considerável a necessidade de deslocamento de profissionais para manutenção do DW.
Em Inmon, Welch e Glassey (1999) cita-se várias vantagens e desvantagens no uso de uma ferramenta para automatizar o processo ETL em um DW. Dentre as vantagens citadas, as que foram obtidas com o desenvolvimento do sistema Freedom foram:
a) programas podem ser construídos rapidamente;
b) produção automática de metadados;
c) redução significante dos custos;
d) redução da possibilidade de falhas em processos conhecidos;
e) redução na manutenção nos processos ETL;
f) alocação de programadores em outras tarefas.
Realizando uma comparação aos itens citados por Inmon, Welch e Glassey (1999), a respeito das desvantagens de não usar ferramentas automatizadas com os processos manuais realizados pela FEESC, pode-se observar itens:
a) a lógica que um programador emprega na torna-se intelectualmente entediante após as primeiras quatro ou cinco execuções de carga manualmente;
b) metadados não são reunidos automaticamente;
c) os processos levam muito tempo para serem construídos;
d) os processos são constantemente alterados, tornando-se um fardo a sua manutenção;
e) custos de infra-estrutura são altos.
Inmon, Welch e Glassey (1999) citou nos itens de desvantagens de não usar uma ferramenta para o processo ETL exatamente o que acontece no ambiente de desenvolvimento de DW da FEESC.
O sistema conseguiu atender ao seu objetivo principal e seus objetivos específicos, automatizando o processo de carga de dados em DW e processando os cubos de decisão (OLAP) proporcionando a visualização dos novos dados do DW em relatórios analíticos.
Esta ferramenta foi construída para atender as necessidades de desenvolvimento da FEESC, que trabalha somente com banco de dados da empresa Oracle. Portanto, esta aplicação é limitada ao uso da tecnologia Oracle para acessar os dados.
Ferramentas visuais, presentes em outros sistemas que executam processos ETL não estão presentes nesta aplicação, devido a restrições quanto ao tempo de desenvolvimento e complexidade do uso de tecnologias que proporcionem a manipulação visual de dados na internet.
Por fim, este trabalho veio engrandecer e muito em termos de conhecimentos pessoais, sobre manipulação de dados, técnicas utilizadas em um DW e na própria lógica de programação web, se teve a oportunidade de aprimorar os conhecimentos em C#, mas também no que diz respeito à superação de todas as dificuldades enfrentadas para realização e conclusão deste trabalho. |
| |
|
