Roman Péchal, Jan Čongva, Martin Durák

Slides:



Advertisements
Podobné prezentace
© 2000 VEMA počítače a projektování spol. s r. o..
Advertisements

Martin Šimeček.  seznámit s APEXem – poskytnout základní manuál  vytvořit webovou aplikaci pro sběr informací o databázových systémech  naplnit databázi.
systém pro sběr, organizaci, analýzu a syntézu dat
ARBES FEIS [BI] ARBES Technologies, s.r.o.
Nadpis Portál pro komunikaci s občany 1 Portál pro komunikaci s veřejností Portál pro komunikaci s veřejností DATRON, a.s. ing. Jaromír Látal projektový.
Robert Havránek Microsoft
Základy databázových systémů
Business intelligence
 Informací se data a vztahy mezi nimi stávají vhodnou interpretací pro uživatele, která odhaluje uspořádání, vztahy, tendence a trendy  Existuje celá.
Řízení vztahu se zákazníky integrované do ERP systému
BI, e-commerce Ing. Jiří Šilhán. Úroveň informatiky.
IS V EKONOMICKÝCH SUBJEKTECH Ing. Jiří Šilhán. IS IS – data+lidi+HW, prvky + relace mezi uživateli, které splňují nějaké cílové chování – tak aby byly.
Spisová služba jako služba. Spisová služba  Je spisová služba opravdu službou? -v mnoha případech nikoliv, a to zejména pokud je vykonávána prostřednictvím.
Studie proveditelnosti datového skladu KrÚ Vysočina - zhodnocení
Databáze Jiří Kalousek.
Informační systémy podnikové systémy CRM
Hana Kotinová Struktura a cíl práce Metody předzpracování dat Systémy předzpracování dat Historie vývoje DPT Jak program pracuje Budoucnost.
METROPOLITNÍ PŘENOSOVÝ SYSTÉM
Transakční systémy Transakční systémy
NET Genium software pro výstavbu a provoz informačního portálu Martin Vonka
Tabulkový procesor.
Inovace výuky ve vazbě na požadavky Mezinárodních výukových standardů doc. Ing. Marie Pospíšilová,CSc. SVŠES.
Datové schránky ve velké společnosti SharePoint partenrská konference Microsoft Pavel Salava Mainstream technologies,
REKS - Regionální knihovnický systém Školení pro dobrovolné knihovníky 4. března 2008.
Relační databáze.
Kriminalita v ČR Databázové systémy II Bc. Martin Chodúr, Bc. Vojtěch Hanáček.
Metainformační systém založený na XML Autor: Josef Mikloš Vedoucí práce: Ing. Jan Růžička, Ph.D. V/2004.
Informatika pro ekonomy II přednáška 10
Reporting Ing. Jan Přichystal, Ph.D.. Úvod Uživatelé obvykle přistupují k DW pomocí BI aplikace Většina využívá předdefinované reporty Poskytují standardizovaný.
Informační systémy TPS,MIS, SIS.
Business Inteligence a její nástroje ve veřejné správě Petr Zeman, Key Account Manager – Public Sector Adastra Corporation.
Podnikání na Internetu letní semestr 2004 Jana Holá VIII.
NeoSync on-line zálohování pro každého / pro každou firmu
Georeporty aplikované využití geoprostorových informací
Návrh Designu a správa multimediálních souborů Dalibor Kačmář Microsoft ČR Host: Julius Hájek Microsoft.
uložené procedury (stored procedures) triggery, sekvence, pohledy, funkce, parametrické dotazy (prepared statements) komplexní agregace a SQL dotazy jiné.
Realizační tým ICZ duben 2005
Systém manažerského sledování a řízení projektů Představení možností, přínosů a řešení Done, s.r.o. Na Krčské stráni 1434/ Praha 4 Tel.: Fax:
MISYS ČVUT v Praze Geografické informační systémy Zpracoval: J.Marák.
Access Vysvětlení pojmu databáze - 01
Moderní řízení úřadu z pohledu tajemníka Radek Baloun, tajemník Magistrátu města Hradec Králové 31.března 2005.
Databáze Lokální systémy a SQL servery VY_32_INOVACE_7B10.
Databázové systémy Informatika pro ekonomy, př. 18.
INTERNET VE STÁTNÍ SPRÁVĚ A SAMOSPRÁVĚ 2008 © Copyright IBM Corporation 2008 Správa obsahu v podání IBM 7. – 8. dubna 2008 ibm.com/cz/public Daniel Beneš.
Infrastruktura pro dotazování nad sémantickými daty Jiří Dokulil, Jakub Yaghob, Filip Zavoral Katedra softwarového inženýrství, MFF UK Praha
Srovnání systémů řízení projektů Vypracovala: Jitka Procházková.
Global network of innovation Identity a Access Management v heterogenním prostředí Marta Vohnoutová 19. dubna 2015.
Delphi a databáze MS SQL Server.
Service layer. Service layer – úvod Problém  Vytvoření API aplikace  Odstínění bussiness logiky a transakčního chování od zbytku aplikace  Kam s aplikační.
Datové Centrum IKEM, ÚIK David Hačkajlo, Jana Hyánková, Daniela Němcová Datové Centrum IKEM, ÚIK Symposium InterSystems 2004, Praha.
Erika Seďová LS  Cíl  Použité nástroje  Velké množství dat  Řešení  Závěr.
Pavel Cach Agenda Krátký úvod Ukázky – analýza dat v prostředí Excel PowerPivot Minigrafy Datové řezy Další možnosti reportingu a.
Publikujeme s Autodesk MapGuide v.5.0 Ing. Jan Růžička, Dr. Ing. Jiří Horák VŠB-Technická univerzita Ostrava
B2B Systémová integrace Jiří Macháček. Osnova ► Úvod ► Terminologie ► Parametry – požadavky ► Způsoby integrace ► Web-Services ► Příklady.
Datové sklady (DWH) VOJTĚCH VYCHODIL, MICHAL VACHLER, PAVEL FIALA BRNO 2015.
Aplikace pro správu a archivaci účtenek
Vypracoval / Roman Málek
as4u advanced system for you
Cloud computing v praxi
Název školy: Autor: Název: Číslo projektu: Název projektu:
Budování Integrovaného informačního systému Národního památkového ústavu Petr Volfík, NPÚ ÚP
Ing. Athanasios Podaras, Ph.D 2016
Databázové systémy přednáška 13 – Analýza a reporting
Informatika pro ekonomy přednáška 8
METODOLOGIE PROJEKTOVÁNÍ
Informační systémy podnikové systémy CRM
Základy business intelligence Jaroslav Šmarda
Analýza velkých dat strukturovaně či nestrukturovaně?
DevOps (nejen) pro mobilní aplikace
WORDPRESS AFFILIATE DATA V XML.
Transkript prezentace:

Roman Péchal, Jan Čongva, Martin Durák Cloud Data warehouse Roman Péchal, Jan Čongva, Martin Durák

Data warehouse - všeobecně Databáze určená pro analytické a reportovací účely Historizace dat Data jsou tříděná do podoby faktů a dimenzí Typicky obsahuje data z mnoha zdrojů dat na jednom místě pro účely datové analýzy Považuje se za stavební kámen Business Intelligence řešení

Úvod Výběr cloud based data warehouse řešení pro menší firmu Současný stav Současný ekosystém postaven v cloudu Převážně strukturovaná data a data ve formě JSON dokumentů Firma pracuje s nižšími stovkami GB dat Problémem je rostoucí množství analytických dotazů

Cíl práce Najít vhodný cloud based data warehouse umožňující Import dat ze současných systémů Práci analytiků pomocí jazyka SQL Zpracování JSON dokumentů Kvalitní zabezpečení

Snowflake Architektura - storage, query processing (virtual warehouse), cloud services Přístup pomocí Webové rozhraní Příkazová řádka - SnowSQL ODBC a JDBC drivers Nativní konektory pro Python atd. Data ve formátu CSV, JSON, Parquet, Avro atd. Snowflake Time travel, Instantní snapshot Šifrování dat pomocí AES 256, privátní cloud, white/blacklisting IP adres, řízený přístup

Google BigQuery spracovanie veľkej sady dátových údajov rýchly a jednoduchý import (insert SQL, CSV, JSON, Avro, Parquet, ORC) použitie verejnej dátovej sady, zdieľanie dát prístup pomocou Web UI, príkazového riadku, REST API, knižnice, nástroje tretích strán cena (ukladanie dát, vkladanie, načítanie a exportovanie dát)

Amazon RedShift(RDS)

Vytvořeno, za pár minut - stojí přibližně 1/10 ve srovnání s tradičními řešeními - kdokoliv může začít svoje podnikání už od $0.25 /h. - lze rozšířit až na úroveň petabytů od $250 za terabyte na rok

3 5 4 Hledisko BigQuery Redshift Snowflake Koeficient Možnosti importu dat 3 5 4 0,25 Práce s nestrukturovanými daty 0,2 Výkon 0,1 Záloha dat Zabezpečení datového skladu 0,15 Cena 0,05 Napojení aplikací třetích stran Nároky na správu Celkem * koeficient 4,2 4,25 4,6

Děkujeme za pozornost