Spelling suggestions: "subject:"data warehouse"" "subject:"data arehouse""
71 |
A comparison of maintenance and support challenges within a data warehousing environment to that of a transactional application environment in a South African context / Shakeel Mitra JuggathJuggath, Shakeel Mitra January 2014 (has links)
In transactional systems development literature, maintenance is reported as being a phase in the software development life cycle. In practice, this phase is often neglected as it occurs post-deployment and other ongoing projects take a higher priority. In data warehouse (DW) systems development literature, maintenance is not reported as being a phase but an ongoing iteration to the DW development project. It should therefore not be treated as a phase by DW systems professionals.
Although there is this fundamental difference in the approach to maintenance, transaction systems maintenance and DW maintenance share many of the same challenges. DW literature and methodologies inherently contain utilities and methods to assist in alleviating these challenges in a DW system. Transactional systems do not deal with these challenges inherently.
Research aspects were extracted from the literature review conducted. The literature review conducted demonstrates what the challenges in maintenance are, how the challenges of transactional systems compare to the challenges of DW maintenance and how the utilities and methods used in DW methodologies can inherently assist in managing these challenges from DW perspective. These research aspects were used to formulate an interpretive questionnaire.
This research portion of the study explores the use of DW systems development and maintenance methodologies in the industry among DW professionals. This is done by conducting an interpretive study using the interpretive questionnaire developed from the literature review. The interpretive questionnaire focusses on maintenance and dealing with the challenges thereof. Many themes evolved from the analysis of the interpretive study by using the content analysis method.
The final conclusions of this study is drawn by comparing and combining the information gathered from the literature review with the information gathered from the
interpretive study. Gaps are identified between practice and literature and recommendations are made based on these gaps. / MSc (Computer Science), North-West University, Potchefstroom Campus, 2015
|
72 |
A comparison of maintenance and support challenges within a data warehousing environment to that of a transactional application environment in a South African context / Shakeel Mitra JuggathJuggath, Shakeel Mitra January 2014 (has links)
In transactional systems development literature, maintenance is reported as being a phase in the software development life cycle. In practice, this phase is often neglected as it occurs post-deployment and other ongoing projects take a higher priority. In data warehouse (DW) systems development literature, maintenance is not reported as being a phase but an ongoing iteration to the DW development project. It should therefore not be treated as a phase by DW systems professionals.
Although there is this fundamental difference in the approach to maintenance, transaction systems maintenance and DW maintenance share many of the same challenges. DW literature and methodologies inherently contain utilities and methods to assist in alleviating these challenges in a DW system. Transactional systems do not deal with these challenges inherently.
Research aspects were extracted from the literature review conducted. The literature review conducted demonstrates what the challenges in maintenance are, how the challenges of transactional systems compare to the challenges of DW maintenance and how the utilities and methods used in DW methodologies can inherently assist in managing these challenges from DW perspective. These research aspects were used to formulate an interpretive questionnaire.
This research portion of the study explores the use of DW systems development and maintenance methodologies in the industry among DW professionals. This is done by conducting an interpretive study using the interpretive questionnaire developed from the literature review. The interpretive questionnaire focusses on maintenance and dealing with the challenges thereof. Many themes evolved from the analysis of the interpretive study by using the content analysis method.
The final conclusions of this study is drawn by comparing and combining the information gathered from the literature review with the information gathered from the
interpretive study. Gaps are identified between practice and literature and recommendations are made based on these gaps. / MSc (Computer Science), North-West University, Potchefstroom Campus, 2015
|
73 |
An Automated Data WarehouseSharathkumar, Sudhindra 07 August 2003 (has links)
An increasing number of organizations are implementing data warehouses to strengthen their decision support systems. This comes with the challenges of the population and the periodic update of data warehouses. In this thesis, we present a tool that provides users with features to create a warehouse database and transform structures of the source database into structures for the warehouse database. It is highly interactive, easy to use, and hides the underlying complexity of manual SQL code generation from its users. Attributes from source tables can be mapped into new attributes in the warehouse database tables using aggregate functions. Then, relevant data is automatically transported from the source database to the newly created warehouse. The tool thus integrates warehouse creation, schema mapping and data population into a single generalpurpose tool. This tool has been designed as a component of the framework for an automated data warehouse being developed at theComputer Science Department, University of New Orleans. Users of this framework are the database administrators, who will also be able to synchronize updates of multiple copies of the data warehouse. Warehouse images that need to be updated are taken offline and applications that need to access the data warehouse can now access any of the other image warehouses. The Switching Application built into this framework switches between databases in a way that is totally transparent to applications so that they do not realize existence of multiple copies of the data warehouse. In effect, even non-technical users can create, populate and update data warehouses with minimal time and effort.
|
74 |
Ambiente de Data Warehousing para integração de dados de saúde pública em âmbito de gestão regional / Data warehousing environment for public healthcare data integration on the regional management scopeOliva, Samuel Zanferdini 08 June 2015 (has links)
Estudos relacionados ao aperfeiçoamento na gestão de saúde descrevem casos de sucesso com soluções utilizando a implementação de Data Warehouse (DW) como um recurso para facilitar e melhorar a qualidade dos dados para gestão na área de saúde pública. O Mapa de Saúde consiste na descrição da distribuição geográfica de recursos humanos, de ações e de serviços de saúde ofertados pelo SUS e pela iniciativa privada, considerando-se o desempenho aferido a partir dos indicadores de saúde do sistema. A gestão em saúde pública carece de recursos que auxiliem efetivamente os processos de análise e tomada de decisão. O objetivo deste trabalho é contribuir para sanar esta carência, a partir do desenvolvimento de um ferramental de apoio à decisão fundamentado em bases de dados de indicadores de saúde determinados pelo Mapa de Saúde. Este ferramental consiste no planejamento e na implementação de um ambiente de Data Warehousing para integração de bases de dados legadas, oriundas dos documentos gerados pelas Redes Regionais de Atenção à Saúde (RRAS) e coletadas pela Secretaria de Saúde do Estado de São Paulo, fornecendo aos usuários gestores os recursos necessários para a geração de consultas ad-hoc complexas com flexibilidade e rapidez sobre os dados contemplados pelo Mapa de Saúde. As fases do processo de desenvolvimento são sete, a saber: (1) Análise dos dados definidos pelo Mapa de Saúde e disponibilizados pelas fontes públicas; (2) Modelagem e implementação de um banco de dados integrador; (3) Modelagem dimensional e implementação do DW; (4) Criação do processo de extração, transformação e carga; (5) Geração dos metadados e configuração do servidor de análises; (6) Análises; (7) Testes. Como resultado, todas as fases de desenvolvimento do ambiente de Data Warehousing foram cumpridas, bem como o procedimento de avaliação junto aos gestores. De acordo com a avaliação, o sistema cumpre de forma satisfatória o seu objetivo de tomar o processo de gestão de saúde mais efetivo, flexível e produtivo. / Studies related to the enhancement on health management describe instances of success with solutions concerning the Data Warehouse (DW) implementation as a resource to facilitate and improve data quality for management on health public area. The Health Map consists of the geographical description of human resources, actions and services distribution of health offered by the Brazilian National Health System and by the private sector, taking into account the existent installed capacity, the investment, and the performance assessed from system\'s health indicators. The goal of this project is to develop a decision support toolset based on health indicators databases defined by the Health Map. This toolset consists of the planning and the Data Warehousing environrnent implementation for the integration of legacy databases, arising from documents generated by the Regional Health Care Networks and collected by the São Paulo State Health Department, hence providing for users a necessary suite of tools for complex ad-hoc queries generation with flexibility and celerity over the data contemplated by the Health Map. Development process steps are seven, namely: (1) Analysis of data defined by the Health Map and available by public sources; (2) Integrator Database modeling and implementation; (3) DW dimensional modeling; (4) Creation of the extraction, transformation and load process; (5) Metadata generation and analysis server configuration; (6) Analysis; (7) Tests. As a result, the Data Warehousing environment development process steps were completely fulfilled, as well as tests and evaluation steps along with the health managers.
|
75 |
Utilização de data warehouses para gerenciar dados de redes de sensores sem fio que monitoram polinizadores. / The use of data warehouse to manage data from wireless sensors network that monitor pollinators.Costa, Ricardo Augusto Gomes da 19 August 2011 (has links)
Este trabalho tem como objetivo a aplicação do conceito de data warehouse para a agregação, gerenciamento e apresentação de dados coletados por meio de Redes de Sensores Sem Fio que monitoram polinizadores. Os experimentos científicos que utilizam tais redes para monitorar habitat geram um volume de dados que precisa ser tratado e analisado, para que possa auxiliar os pesquisadores e demais interessados nas informações. Tais dados, gerenciados e correlacionados com informações de outras fontes, podem contribuir para a tomada de decisões e ainda realimentar outros experimentos. Para a avaliação da proposta, desenvolveu-se um modelo para extração, transformação e normalização dos dados coletados por redes de sensores sem fio, contemplando ainda a carga em data warehouse. Considerou- se no modelo, dados tabulados das redes de sensores sem fio, utilizados em experimentos com abelhas e ainda dados de outras fontes sobre o cultivo de abelhas, importantes para obtenção de visões do data warehouse mais apuradas. O uso de data warehouse aplicado a esse contexto mostrou-se um alternativa viável e útil, pois facilitou a obtenção de dados consolidados sobre o experimento, importante para a tomada de decisão pelos pesquisadores e ainda, diminui o tempo gasto pelos interessados em extrair essas informações, em comparação à tradicional análise em planilhas eletrônicas. / This work aims at applying the concept of data warehouse for data aggregation, management and presentation of data collected by Wireless Sensor Networks that monitor pollinators. Scientific experiments using such networks to monitor habitat generate a volume of data that must be addressed and analyzed, so that they can help researchers and others interested in the information. This data, managed and correlated with information from other sources may contribute to the making and still replenish other experiments. For the evaluation of the proposal, it was developed a model for the extraction, processing and standardization of data collected by wireless sensor networks, covering also the load on the data warehouse. It was considered in the model tabulated data networks of wireless sensors, used in experiments with bees and even data from other sources on the cultivation of bees, important to obtain views of the data warehouse more accurate. The use of data warehouse implemented in this context proved to be a viable and useful, as it facilitated the obtaining of information for decision making by researches and stakeholders and reduces time consumed by stakeholders to extract such information.
|
76 |
GESTÃO DO PROCESSO DE RELIGAÇÃO DE ÁGUA TRATADA NA CIDADE DE GOIÂNIA, UTILIZANDO OLAP E DATA WAREHOUSE. / MANAGEMENT REWIRING PROCESS TREATED WATER IN THE CITY OF GOIÂNIA, USING OLAP AND DATA WAREHOUSE.Ferreira, André Luiz Nascente 08 March 2013 (has links)
Made available in DSpace on 2016-08-10T10:40:16Z (GMT). No. of bitstreams: 1
ANDRE LUIZ NASCENTE FERREIRA.pdf: 1645123 bytes, checksum: b3c5d896af5d93a8c4c05a04afea9227 (MD5)
Previous issue date: 2013-03-08 / Through sanitation, economic, social and public health problems are minimized
resulting in a considerable improvement in quality of life. For companies in this line of
work can improve their results by establishing quality in the managment of their internal
processes. There is a specific process of these companies dealing with Reconnections
of Treated Water, which usually occur due to cutting of their supply. This work
discusses the concepts of Information Technology (IT) in the intent to use them to
improve the management of this process, covering specific theories of Software
Engineering, Data Warehouse and OLAP. Overall, the work presents the development
and implementation of an OLAP tool to assist in specific control over the time spent in
performing the Reconnections of Treated Water in the city of Goiânia, state of Goiás,
and analyzes the results of this tool, comparing scenarios before and after its
implementation of the same. According to the analysis of the results, we observed
improvements on the times of reconnections after the implementation of the developed
tool. / Através do saneamento, problemas econômicos, sociais e de saúde pública
são amenizados resultando em uma melhoria considerável na qualidade de vida da
população. Para que empresas desse ramo de atividade possam desempenhar cada
vez melhor suas atribuições é necessário estabelecer qualidade na gestão dos seus
processos internos. Existe um processo específico dessas empresas que são
indispensáveis para a manutenção da qualidade de vida e disponibilização do
saneamento para a população, que se refere às Religações de Água Tratada, que
geralmente ocorrem devido ao corte do seu abastecimento. Este trabalho aborda
conceitos de Tecnologia da Informação (TI) na intenção de utilizá-los para melhorar a
gestão deste processo, abrangendo teorias específicas de Engenharia de Software,
OLAP e Data Warehouse. De maneira geral, o trabalho apresenta o desenvolvimento
e implantação de uma ferramenta OLAP específica para auxiliar no controle sobre o
tempo gasto na execução das Religações de Água Tratada na cidade de Goiânia, no
estado de Goiás, e analisa os resultados obtidos por essa ferramenta, comparando
cenários antes e após a implantação da mesma. De acordo com a análise dos
resultados obtidos, pôde-se observar melhorias em relação ao tempo de execução das
religações após a implantação da ferramenta desenvolvida.
|
77 |
Data Warehouse utilizando processamento paralelo em ambiente distribuído. / Data Warehouse using parallel programming in an environment distributed.Ruggiero Júnior, Waldemar 02 July 2007 (has links)
Esse trabalho propõe uma solução de um Data Warehouse distribuído para implementação de um sistema de CRM, Customer Relationship Management, com o objetivo de uso no ambiente bancário possibilitando que ações de relacionamento com clientes sejam planejadas e implementadas. É proposta uma arquitetura para implementação de um Data Warehouse em ambiente distribuído, utilizando programação paralela. Com o aumento no volume de dados armazenados nos Data Warehouse, as arquiteturas tradicionais exigem processadores e sistemas de entrada e saída cada vez mais robustos em termos de desempenho. Isso fica mais bem caracterizado quando são executadas procuras complexas (Ad hoc). A utilização de ambientes distribuídos em conjunto com programação paralela é uma alternativa para redução de custo e aumento de desempenho. É apresentada, aqui, uma proposta de arquitetura de Data Warehouse distribuído, integrado ao uso de programação paralela. / This lecture proposes a solution for Data Warehouse in an distributed environment for implementation of a CRM, Customer Relationship Management in a banking system. It\'s possible to create, plan and implement relationship actions with clients. Architecture is proposed for implementation of a Data Warehouse in a distributed environment, using parallel programming. With the increase of volume of data stored in Data Warehouse, the traditional architectures needs high performance in terms of processors and input and output systems. This kind of problem is well characterized when high complex queries (Ad hoc) is performed. Using distributed environment, together with parallel programming is a good choice to increase the performance and reduce cost. It\'s presented, here, a proposal for architecture of distributed Data Warehouse, integrated with the use of parallel programming.
|
78 |
Um modelo para manutenção de esquema e de dados em data warehouses implementados em plataformas móveis. / A model to schema and data maintenance in data warehouses implemented at mobile platforms.Italiano, Isabel Cristina 11 June 2007 (has links)
O presente trabalho propõe uma arquitetura de utilização de Data Warehouses em computadores móveis, descreve os componentes desta arquitetura (dados e processos) que permite o sincronismo dos dados baseado em metadados e limitado ao escopo de acesso de cada usuário. As estruturas de dados e os processos que compõem a arquitetura proposta são reduzidos a problemas conhecidos e já solucionados, justificando sua viabilidade. Além disso, o presente trabalho também fornece diretrizes para avaliar a complexidade e o impacto causados por alterações de esquema no Data Warehouse central que devem ser refletidas nos data marts localizados nas plataformas móveis. A avaliação da complexidade e impacto das alterações nos esquemas do Data Warehouse pode auxiliar os administradores do ambiente a planejar a implementação destas alterações, propondo melhores alternativas no caso de alterações de esquema mais complexas e que causem um impacto maior no ambiente. A importância do trabalho está relacionada a casos reais de necessidade de evolução nas bases de dados analíticas (Data Warehouse) em computadores móveis, nos quais os usuários mantêm seu próprio subconjunto de dados do Data Warehouse para apoiar os processos de negócios. / This work presents an architecture for using Data Warehouses in mobile computers and describes the architecture components (data and processes) that allow the data synchronism based on metadata and restricted to the scope of access for each user. The data structures and the processes composing the architecture are reduced to already known and solved problems, justifying its feasibility. Besides, this work also provides the guidelines to evaluate the complexity and impact caused by changes of schema in the central Data Warehouse that must be reflected in the data marts located in the mobile platforms. The analysis of the complexity and impact of the changes made to the schemas may help environment administrators to plan these changes and propose better alternatives when dealing with more complex schema changes causing a greater impact on the environment. The relevance of this work is related to real cases that require evolution of analytical databases (Data Warehouse) in mobile computers in which the users keep their own subset of Data Warehouse information to support their business processes.
|
79 |
Análise de componentes principais em data warehouses / Principal components analysis in data warehousesRossi, Rafael Germano 07 November 2017 (has links)
A técnica de Análise de Componentes Principais (PCA) tem como objetivo principal a descrição da variância e covariância entre um conjunto de variáveis. Essa técnica é utilizada para mitigar redundâncias no conjunto de variáveis e para redução de dimensionalidade em várias aplicações nas áreas científica, tecnológica e administrativa. Por outro lado, o modelo de dados multidimensionais é composto por relações de fato e dimensões (tabelas) que descrevem um evento usando métricas e a relação entre suas dimensões. No entanto, o volume de dados armazenados e a complexidade de suas dimensões geralmente envolvidas neste modelo, especialmente no ambiente de data warehouse, tornam a tarefa de interpretar a correlação entre dimensões muito difícil e às vezes impraticável. Neste trabalho, propomos o desenvolvimento de uma Interface de Programação de Aplicação (API) para a aplicação da PCA no modelo de dados multidimensionais para facilitar a tarefa de caracterização e redução de dimensionalidade, integrando essa técnica com ambientes de Data Warehouses. Para verificar a eficácia desta API, um estudo de caso foi realizado utilizando dados de produção científica e suas citações obtidas das Plataformas Lattes, Web of Science, Google Scholar e Scopus, fornecidas pela Superintendência de Tecnologia da Informação da Universidade de São Paulo. / The Principal Component Analysis (PCA) technique has as the main goal the description of the variance and covariance between a set of variables. This technique is used to mitigate redundancies in the set of variables and as a mean of achieving dimensional reduction in various applications in the scientific, technological and administrative areas. On the other hand, the multidimensional data model is composed by fact and dimension relations (tables) that describe an event using metrics and the relationship between their dimensions. However, the volume of data stored and the complexity of their dimensions usually involved in this model, specially in data warehouse environment, makes the correlation analyses between dimensions very difficult and sometimes impracticable. In this work, we propose the development of an Application Programming Interface (API) for the application of PCA on multidimensional data model in order to facilitate the characterization task and dimension reduction, integrating the technique with Data Warehouses environments. For verifying the effectiveness of this API, a case study was carried out using the scientific production data obtained from the Lattes Platform, the Web of Science, Google Scholar and Scopus, provided by the IT Superintendence at University of São Paulo.
|
80 |
Uma análise da aplicabilidade do Data Warehouse no comércio eletrônico, enfatizando o CRM analítico / An analysis of applicability of Data Warehouse in electronic commerce, with emphasis on the analytical CRMNeves, Fabricia Vancim Frachone 22 November 2001 (has links)
Atualmente, um dos grandes desafios enfrentados pelas empresas que operam no comércio eletrônico é de garantir a fidelidade de seus clientes. Devido a este fato, as empresas têm se preocupado cada vez mais na utilização de uma ferramenta capaz de integrar os dados distribuídos em banco de dados operacionais, para transformar suas informações em diferencial competitivo. Desta forma, a aplicabilidade da ferramenta Data Warehouse no comércio eletrônico, juntamente com a estratégia do Customer Relationship Management (CRM), surge como um elemento central da empresa focada no cliente, pois é capaz de fornecer informações competitivas e essenciais aos responsáveis pelas decisões estratégicas. Assim, através da ferramenta Data Warehouse sustentada pela estratégia de CRM, toda a \"sequência de cliques\" realizada pelos clientes do comércio eletrônico é armazenada historicamente, possibilitando a retenção destes com a empresa. Portanto o objetivo do presente trabalho é analisar a aplicabilidade do Data Warehouse no comércio eletrônico, visando o CRM analítico. O trabalho contribui também para mostrar às empresas que a integração entre tecnologia de informação (Data Warehouse) e marketing (CRM) em um ambiente Web oferece diferentes oportunidades de coleta de dados a respeito dos clientes, promovendo desta forma a personalização de produtos e serviços, garantindo maior lealdade destes com a empresa e, conseqüentemente, maior lucratividade. / Currently, one of the greatest challenges faced by companies that operate in the electronic commerce is to guarantee their customers\' fidelity. Due to this fact, these companies have been considering the employment of tools capable of integrating distributed data onto operational databases in order to transform information into a competitive and distinguishing asset. Thus, the applicability of Data Warehouse tools in Electronic Commerce, together with the strategy of Customer Relationship Management (CRM), appear as a key element for customer-oriented companies, since they are capable of supplying the ones responsible for strategic decisions with competitive and essential information . Hence, through Data Warehouse tools supported by the CRM strategy, all the \"clickstream\" carried out by the customers in electronic commerce, can be historically stored, making it possible, through further analyses, to identify potential customers, as well as keeping them with the company. The objective of the present research is to consider the applicability of Data Warehouse in Electronic Commerce, aiming at the analytical CRM. The research also shows companies that Data Warehouse, when combined with the CRM in a Web environment, offers alternative means for customer-related data collection, thus, providing the customization of products and services, reassuring clients\' loyalty to the company and, consequently, greater profits.
|
Page generated in 0.0918 seconds