Dotazy na částečnou shodu v hašovacích schematech Předpokládá se adresový prostor o velikosti 2 d Pro každý atribut A i je k dispozici hašovací funkce.

Slides:



Advertisements
Podobné prezentace
OZD: Hašování RNDr. Michal Žemlička.
Advertisements

Vestavné mikropočítačové systémy
Senior IT operations manager
Pevné disky Štěpán Šípal.
Pevné disky Kateřina Trčková 4.I.
Pevné disky-rozhraní.
Tento výukový materiál vznikl v rámci Operačního programu Vzdělávání pro konkurenceschopnost Číslo projektu: CZ.1.07/1.5.00/ Číslo materiálu: VY_32_INOVACE_PSK-4-17.
Hard Disk Drive & jeho alternativy
Identifikátor materiálu: EU
Souborové systémy.
Dlouhodobá paměť autor : Tomáš Geryk kontakt : web :
SQL – tříhodnotová logika
Základy informatiky přednášky Kódování.
Architektury a techniky DS Tvorba efektivních příkazů I Přednáška č. 3 RNDr. David Žák, Ph.D. Fakulta elektrotechniky a informatiky
Kontakty slajdy: ftp://ulita.ms.mff.cuni.cz/predn/POS.
INFORMATIKA 4_10_ HODINA 10. TÝDEN
Diskový oddíl Souborový systém RAID 9/2012.
Záznamová média Obsah: Rozdělení ZM…………………… HDD………………………………
Vnější paměť Ukládání dat pouze do operační paměti by při práci s počítačem nestačilo. Pro uchování vytvořených dat mají počítače ještě další, tzv. diskové.
REDUKCE DAT Díváme-li se na soubory jako na text, pak je tento text redundantní. Redundance vyplývá z:  některé fráze nebo slova se opakují  existuje.
Pravidelné zálohování dat
Zálohování dat Karel Schwarz KFA Praha 26.dubna 2010.
Číslo projektuCZ.1.07/1.5.00/ Číslo materiáluVY_32_INOVACE_044 Název školyGymnázium, Tachov, Pionýrská 1370 Autor Ing. Roman Bartoš Předmět Informatika.
DBI007: Fyzické nosiče souborů RNDr. Michal Žemlička.
BIS RAID Roman Danel VŠB – TU Ostrava.
Pásková jednotka Páskové jednotky pracují na magnetickém principu podobně jako diskety nebo pevné disky. Rozdíl je pouze v tom, že se záznam provádí na.
Datová úložiště Zdroj: IBM.
Jak učit práci s videem.. Body učiva k práci s videem: 1. Co jsou videosoubory. 2. Typy videosouborů. 3. Kvalita videosouborů. 4. Jak přehrávat videosoubory.
Paměťová média.
Základy číslicové techniky
Hardware serveru Centrum pro virtuální a moderní metody a formy vzdělávání na Obchodní akademii T.G. Masaryka, Kostelec nad Orlicí Autor:
Relační databáze.
Mgr. Miroslava Černá ZŠ Volgogradská 6B, Ostrava-Zábřeh
Gymnázium, SOŠ a VOŠ Ledeč nad Sázavou I NFORMAČNÍ A KOMUNIKAČNÍ TECHNOLOGIE Ing. Jan Roubíček.
Co jsou to multimédia Bohumil Bareš.
Základní části počítače
Identifikátor materiálu: EU
Ochrana dat Ochrana dat je jednou z nejdůležitějších činností uživatele výpočetní techniky. Data, uložená v počítači, jsou různě důležitá. Od souborů,
Prezentace pro Kraj Vysočina Jan Gregor
Orbis pictus 21. století Tato prezentace byla vytvořena v rámci projektu.
Diskové pole RAID Disková pole (RAID - Redudant Array of Inexpensive Disks) se používají v souvislosti se zabezpečením dat. Princip RAID pole spočívá.
Hardware 4 verze 2.6.
1 paralelní (Centronics) pro připojení tiskárny, scanneru Konektor 25 pólový s otvory seriová (COM 1, COM 2, PS/2)myš, modem tato zařízení.
Základní pojmy a části počítače Data (informace) se v počítači ukládají v pojmenovaných celcích, které se nazývají soubory. Soubory jsou dvou druhů: Programy.
Počítačové komponenty Jiří Vohradský. Co je počítač? Počítač je zařízení pro zpracování informací. Informace jsou v počítači ve formě různých druhů dat.
Architektura počítače
Digitální výukový materiál zpracovaný v rámci projektu „EU peníze školám“ Projekt:CZ.1.07/1.5.00/ „SŠHL Frýdlant.moderní školy“ Škola:Střední škola.
Pevný disk (HDD - Hard Disk Drive)
Databázové systémy Přednáška č. 5 Datové typy a Fyzická organizace dat.
Ústav zobrazovacích metod ZSF OU RDG ústav FN Ostrava.
Základní pojmy ve výpočetní technice
Diskové pole RAID Disková pole (RAID - Redudant Array of Inexpensive Disks) se používají v souvislosti se zabezpečením dat. Disková pole (RAID - Redudant.
Hardware - komponenty (5). Projekt: CZ.1.07/1.5.00/ OAJL - inovace výuky Příjemce: Obchodní akademie, odborná škola a praktická škola pro tělesně.
ZÁKLADNÍ ŠKOLA, MATEŘSKÁ ŠKOLA, ŠKOLNÍ JÍDELNA A ŠKOLNÍ DRUŽINA BOUZOV, PŘÍSPĚVKOVÁ ORGANIZACE Operační program Vzdělávání pro konkurenceschopnost, č.OP.
Prioritní osa: 1 − Počáteční vzdělávání Oblast podpory: 1.4 − Zlepšení podmínek pro vzdělávání na základních školách Registrační číslo projektu: CZ.1.07/1.4.00/
ZÁZNAMOVÁ MÉDIA. Podle principu čtení se datové nosiče dělí na : Magnetická média, tzn. disketa, pevný disk, magnetická páska (audiokazeta, videokazeta,
Zálohování dat. Zálohování dat (podle CHIP) důvody zálohování – problémy HW, SFTW, viry, chyby uživatele, viry, hackeři, přírodní katastrofy, krádeže.
Jednotky informácí a paměťová média Jan Čech, Ondřej Janda, Vinh Ngo The Jiří Hadwiger,Tomáš Lupač, Libor Macháček.
DVD-RAM technologická rešerše autor: Karel Podvolecký kontakt: web:
NÁZEV ŠKOLY: S0Š Net Office, spol. s r.o, Orlová Lutyně AUTOR: Bc. Petr Poledník NÁZEV: Podpora výuky v technických oborech TEMA: Počítačové systémy ČÍSLO.
Software,hardware,data,biti a bajty.  Software je v informatice sada všech počítačových programů používaných v počítači, které provádějí nějakou činnost.
Financováno z ESF a státního rozpočtu ČR.
Petr Fodor.
Financováno z ESF a státního rozpočtu ČR.
Financováno z ESF a státního rozpočtu ČR.
Pevný disk – fyzická struktura
Paměť počítače.
Segmentace Autorem materiálu a všech jeho částí, není-li uvedeno jinak, je Ing. Libor Otáhalík. Dostupné z Metodického portálu ISSN: 
Informační a komunikační technologie 5. ročník
Datový nosič, záznamové médium Slouží k ukládání či zálohování dat
Transkript prezentace:

Dotazy na částečnou shodu v hašovacích schematech Předpokládá se adresový prostor o velikosti 2 d Pro každý atribut A i je k dispozici hašovací funkce do d i bitů,  i=1,..,n d i = d V dotazech jsou bity atributů s nespecifikovanou hodnotou nahrazeny ´?´ Je-li k počet ?-bitů, pak dotaz pak stojí 2 k  více

Částečná shoda v hašovacích schematech – cena dotazu Pravděpodobnosti dotazů na jednotlivé atributy jsou P i,  P i = 1 Dotaz může být zadán jako podmnožina atributů q  {1,..,n} P q pravděpodobnost dotazu q Průměrná cena dotazu:  q  Q (P q *  i  q 2 d i )

Částečná shoda v hašovacích schematech - rozvržení 1.d i = (d -  j=1,..,n log P j )/n + log 2 P i 2.d i < 0: polož d i = 0, eliminuj A i, zpět na 1. 3.d i > d: polož d i = d, ostatní d j = 0 Nevyjdou-li d i celá, zaokrouhlíme je tak, aby součet byl d.

Částečná shoda v hašovacích schematech – upravené rozvržení 1.d i = (d -  j=1,..,n log 2 P j )/n + log 2 P i 2.d i < 0: polož d i = 0, eliminuj A i, zpět na 1. 3.d i > d: polož d i = d, ostatní d j = 0 4.d i >  log 2 |A i |  : polož d i =  log 2 |A i | , eliminuj A i, polož d := d - d i, přepočítej pravděpodobnosti a začni opět od 1. Nevyjdou-li d i celá, zaokrouhlíme je tak, aby součet byl d.

Deskriptory stránek Ke každému záznamu je vytvořena w- bitový deskriptor záznamu. Každému atributu A i odpovídá úsek deskriptoru w i tak, aby  i=1..n w i = w. Ze všech deskriptorů záznamů v každé stránce se pomocí OR vytvoří deskriptory stránek.

Deskriptory stránek - dotaz K dotazu se vytvoří deskriptor dotazu podobně, jako se postupovalo při konstrukci deskriptorů záznamů; kde není hodnota atributu známa, doplní se nulami. Prochází se deskriptory stránek: tam, kde je v dotazu ´1´ a v deskriptoru stránky ´0´, nemá smysl ve stránce hledat.

Deskriptory stránek - tvorba Pro každý atribut nastavíme pevný počet bitů (k) Vrstvení deskriptorů pomocí OR dává naději vybrat i záznamy, které dotazu nevyhovují; můžeme si předem určit, jak velká část to bude (F) k = (1/ln 2).ln(1/F) w = (1/ln 2) 2.n.ln(1/F)

Deskriptory stránek - optimalizace Pro velké soubory deskriptorů stránek je možné vytvořit další úroveň, kdy se z deskriptorů stránek dělají deskriptory segmentů (větších částí souboru) – opět pomocí OR Technika blízká signaturovým metodám pro hledání v kolekcích textů, je tedy možné použít i obdobná vylepšení.

Grayovy kódy Binární kódy, kde po sobě jdoucí hodnoty se liší vždy pouze v jediném bitu. dekadickýGrayůvbinárnídekadickýGrayůvbinární

Grayovy kódy (2) Při použití Grayových kódů v kombinaci s dotazy na částečnou shodu v hašovacích schematech je počet shluků dat ke čtení vždy nejvýše takový jako při běžném binárním kódování Počet shluků se pohybuje mezi 50% a 100%

RAID Redundant Array of Inexpensive Disks Slouží k zvýšení kapacity, rychlosti nebo bezpečnosti disků. Navenek se chová jako jediná disková jednotka s pozměněnými vlastnostmi. Existuje celá řada různých uspořádání, každé z nich vhodné pro jinou aplikaci.

RAID 0 - schema

RAID 0 - Stripping Data rozložena na více disků Není to klasický RAID – nedochází k redundanci Při výpadku jediného disku můžeme přijít o veškerá data Zvyšuje výkon jak pro čtení, tak pro zápis

RAID 1 A B C A B C

RAID 1 - Mirroring Disky instalovány ve dvojicích Vždy se zapisuje na oba disky v páru Čtení se realizuje tam, kde to jde rychleji Při výpadku jediného disku jej stačí vyměnit a nakopírovat na něj data z jeho partnera Může „přežít“ i výpadek až n disků z 2n – za předpokladu, že z každé dvojice vypadne nejvýše jeden.

RAID 0+1, RAID 10 Kombinace principů RAID 0 a 1 pro 4 disky Disky je nutné dávat v sudém počtu 0+1: stripe + mirror … levné souborové servery 10: mirror + stripe … databáze Toto chování odpovídá již samotnému RAID 1 pro více než 2 disky Podpora již u levných a jednoduchých řadičů (0,1,0+1)

RAID 3 Jeden z disků je vyhrazen na paritu Rychlé I/O pro sekvenční data Neumí zároveň číst i zapisovat Systém je odolný proti selhání jednoho disku – data je možné dopočítat Pracuje po bitech – disky musí být synchronizovány

RAID 4 Data jsou zapisována po blocích na jednotlivé disky Jeden z disků je vyhrazen na paritu Rychlé I/O pro sekvenční data Neumí zároveň číst i zapisovat Systém je odolný proti selhání jednoho disku – data je možné dopočítat Úzkým hrdlem je paritní disk – pomalý zápis

RAID 5 Parita zapisována postupně na různé disky Použitelné od 3 disků výše Rozumný kompromis mezi bezpečností dat, kapacitou a výkonem Vyžaduje složitější elektroniku (bývá na řadičích s procesorem a větší pamětí)

RAID 6 Odolné proti výpadku až 2 disků Zvýšená redundance Menší využití kapacity Potřebuje složitější řadič Vhodné pro mission-critical aplikace

Systémy výměnných disků Zařízení umožňující bezobslužný přístup k více CD nebo DVD diskům Někdy včetně podpory zápisu Několik různých forem: –Mechanika na více CD –Stojan s mnoha mechanikami po jednom CD –Mechanika s přídavným zařízením na výměnu CD (jukebox)

Parametry jukeboxu Až stovky CD/DVD (tj. až cca 5,5TB) Může obsahovat i více mechanik Doba výměny disků 2,5-10s Někdy i možnost otáčet média (u oboustranných)

Magnetická páska Několik různých systémů lišících se výrazně svými parametry A –Kapacita 20/40/60 GB –Zálohování 43,2 GB/hod –Hledání 60s B –Kapacita 160 GB –Rychlost čtení/zápisu 16 MB/s

Páskové výměnné systémy Obdobně jako u CD/DVD existují i bezobslužné systémy s jednou či několika málo mechanikami a mnoha páskami Kapacity až desítky TB

Bezpečnost dat RAID bývá bezpečnější než samotné disky (s výjimkou RAID 0), ale i zde může dojít ke ztrátám dat  je třeba zálohovat, případně využívat další typy pamětí (diskové a páskové jukeboxy) Kritické systémy i jejich záložní kopie je dobré mít umístěné na dostatečně vzdálených a různých místech (požáry, povodně)