Novinky ve VMware vSAN 6.x

Prezentace na téma: "Novinky ve VMware vSAN 6.x"— Transkript prezentace:

1 Novinky ve VMware vSAN 6.x
Martin Pospíšil techdata.com

2 Agenda Architektura vSAN Přehled verzí vSAN Licencování vSAN
Novinky ve verzi vSAN 6.0 Novinky ve verzi vSAN 6.1 Novinky ve verzi vSAN 6.2 Novinky ve verzi vSAN 6.5 Novinky ve verzi vSAN 6.6 VMware Hands-on Labs TechData Demo & Lab Centrum

3 Architektura vSAN 1/4 VMware Virtual SAN is a new software-defined storage tier for VMware vSphere, bringing the benefits of the software defined data center to storage. By clustering server hard disk and solid state drives (HDDs and SSDs), Virtual SAN creates a flash-optimized, highly resilient enterprise-class shared datastore designed for virtual environments.

4 Architektura vSAN 2/4 Architektura první verze vSAN – vSAN 5.5

5 Architektura vSAN 3/4 Architektura první verze vSAN – vSAN 5.5

6 Architektura vSAN 4/4 Architektura první verze vSAN – vSAN 5.5

7 Přehled verzí vSAN Verze vSAN je pevně spjatá s verzí vSphere (ESXi) a vCenter Server, není tedy možné provozovat např. vSAN 6.6 na vSphere 5.5 vSAN 5.5: vSphere 5.5 (vCenter Server 5.5 & ESXi 5.5) On-disk format 1 vSAN 6.0: vSphere 6.0 (vCenter Server 6.0 & ESXi 6.0) On-disk format 2 vSAN 6.1: vSphere 6.0 U1 (vCenter Server 6.0 Update 2 & ESXi 6.0 Update 1) vSAN 6.2: vSphere 6.0 U2 (vCenter Server 6.0 Update 2 & ESXi 6.0 Update 2) On-disk format 4 (verze 3 je přechodová pro upgrade, viz VMware KB ) vSAN 6.5: vSphere 6.5 (vCenter Server 6.5 & ESXi 6.5) On-disk format 4 vSAN 6.6: vSphere 6.5.0d (vCenter Server 6.5.0d & ESXi 6.5.0d) On-disk format 5 vSAN 6.6 je součástí ESXi 6.5.0d (build ) a vCenter Server 6.5.0d Express Patch 2 (build ) Pro využití všech funkcí dané verze je nutné povýšit ESXi, vCenter a on-disk format vSAN on-disk format versions are reported differently in some vSAN releases. As of vSAN 6.5, all on-disk format versions have been harmonized and the on-disk format version will be reported identically at all layers in the stack. In vSAN 6.2, however, the on-disk version may be reported differently in various levels of the stack. See VMware KB ( for details.

8 Licencování vSAN – 1/3 Obecně použitelné edice (platné pro verzi vSAN 6.6 k 06/2017)

9 Licencování vSAN – 2/3 vSAN Standard, Advanced a Enterprise jsou licencovány per-CPU (socket) Jde o samostatné licence, které nejsou součástí VMware vSphere ani VMware vSOM Je možné provozovat libovolný typ VM – tj. desktopy i servery Edice je možné povýšit, tzn. přejít např. z Advanced na Enterprise ROBO – Remote Office / Branch Office vSAN Standard for ROBO a Advanced for ROBO jsou licencovány per-VM Licence se prodávají v balících po 25 licencích, které lze rozdělit do více lokalit, např. 5 kanceláří po 5 VM V každé vzdálené lokalitě může běžet maximálně 25 VM, pokud je potřeba více, musí se použít obecné vSAN standard, Advanced nebo Enterprise licence Počet ESXi serverů není omezen, ve vSAN clusteru v každé jednotlivé lokalitě však nesmí současně běžet více než 25 VM Neexistuje upgrade/konverze z licencování ROBO per-VM na Standard, Advanced, Enterprise per-CPU

10 Licencování vSAN – 3/3 Licence vSAN for Desktop je určena výhradně pro provoz VDI VM Není omezeno na VMware Horizon, je možné využít i s řešením třetích stran Nabízí zajímavou cenovou politiku, např. pro 3 servery po 2 CPU je Standard edice výhodnější do cca 300 VM, při více VM se již vyplatí licence per-CPU Dostupná v edicích Standard, Advanced a Enterprise Licencuje se per-CCU (concurrent user), licence jsou dostupné v balících po 10 nebo 100 licencích vSAN for Desktop Advanced je součástí VMware Horizon Advanced a VMware Horizon Enterprise

11 Novinky ve verzi vSAN 6.0 – 1/3
Podpora All-Flash konfigurací Je možné určit, které SSD budou použity jako write cache a které jako capacity tier Write cache vyžaduje enterprise-grade SSD, jako úložiště lze použít běžné MLC disky, nicméně musejí být na HCL Požadavky na SSD – 0.2 TBW za den (TB written) po dobu 5 let, tj. musí zvládnout zapsání 365TB Fault Domains Umožňuje stanovit, které ESXi servery jsou v kterém racku Při vytváření nového VM zajistí vSAN rozdělení jednotlivých komponent do různých fault domains, takže ani výpadek celého racku pak neovlivní dostupnost VM

12 Novinky ve verzi vSAN 6.0 – Fault Domains

13 Novinky ve verzi vSAN 6.0 – 2/3
Nový on-disk formát Vyšší výkon při klonování a práci se snapshoty (~2% pokles výkonu při 32 úrovních vnoření) Až 9000 komponent per host – nehrozí dosažení limitu např. při nasazení ve VDI implementacích Větší škálovatelnost Podpora 64 serverů v clusteru 40K IOPS per host v hybridních konfiguracích 90K IOPS per host v all-flash konfiguracích 200 VMs per host 8000 VMs per Cluster Velikost VMDK až 62TB Operační vylepšení Rebalance Evacuation granularity – lze evakuovat i jen jeden disk místo celé diskové skupiny Default VM storage policy – možné vytvořit a nastavit vlastní výchozí policy Object quorum – witness již není vždy vyžadován, používá se nový algoritmus, založený na počtech hlasů, které mohou být u jednotlivých objektů vyšší než 1 Identifikace fyzických disků rozsvícením LED – nově prostřednictvím GUI Změna typu disku local/remote a flash/HDD prostřednictvím GUI Quorum ve vSAN 5.5: when you deployed a VM with NumberOfFailuresToTolerate = 1, you always had at least 3 components: 1st copy of the data, 2nd copy of the data, and then a witness component for quorum. In version 5.5, for a VM to remain accessible, “one full copy of the data and more than 50% of components must be available”. Quorum ve vSAN 6.0: each component has a number of “votes”, which may be one or more. To achieve quorum in Virtual SAN 6.0, “more than 50 percent of votes” rather than “more than 50 percent of components” is needed.

14 Novinky ve verzi vSAN 6.0 – 3/3
Podpora DAS Odstraňuje požadavek na interní disky Umožňuje použít disky z enclosure pro vSAN datastore Zpřístupňuje vSAN pro blade systémy DAS musí být na HCL! Podpora L3 sítí Umožňuje propojit do jednoho clusteru nody v různých síťových segmentech Virtual SAN Health Service plug-in Web Client plug-in Sleduje průběžně stav vSAN infrastruktury a v případě zjištění nesouladu či problému nabízí vysvětlení a případně řešení

15 Novinky ve verzi vSAN 6.0 – Virtual SAN Health Service plug-in

16 Novinky ve verzi vSAN 6.1 – 1/3
Stretch Clustering Požadavky: 5ms RTT latence mezi data site 200ms RTT latence mezi data sites a witness site Multicast mezi data site Advanced licence Witness site nevyžaduje L2 ani multicast ROBO 2-node konfigurace 2 nody ve vzdálené lokalitě, witness node v centrální 500ms RTT latence Enhanced Replication Zmenšeno RPO (recovery point objective) na 5 minut (výchozí je 15) Možné využít VMware SRM pro automatizaci DR Podpora nového HW Intel NVMe Diablo ULLtra DIMM >8TB drives

17 Novinky ve verzi vSAN 6.1 – 2/3
SMP-FT support Přidána podpora vSphere Fault Tolerance pro zajištění zero downtime provozu mission critical aplikací i při HW výpadku Podpora MS WSFC a Oracle RAC Operační vylepšení Disk Group bulk claiming Disk claiming per Tier On-disk format upgrade from GUI Health Check plug-in Nově je součástí vCenter serveru a nevyžaduje dodatečnou instalaci Kontroly stavu stretched clusteru Generuje alarmy do vCenter serveru vSAN Management Pack pro vROPS Umožňuje integraci vSAN s vROPS Sleduje zdraví, efektivitu a hrozby ve vSphere a vSAN prostředí a usnadňuje tak jejich správu

18 Novinky ve verzi vSAN 6.1 – 3/3
Problematic Disk Handling vSAN monitoruje stav SSD a HDD a proaktivně odpojuje problematická zařízení Při zjištění významného nepřerušovaného úseku vysoké latence vSAN odpojí buďto disk (u capacity tier) nebo celou disk group (u write cache) Komponenty na postiženém disku/diskové skupině jsou označeny jako Absent a po vypršení časovače ve službě clomd jsou obnoveny na ostatních nodech clusteru Prahová hodnota latence je 50ms Může způsobovat nečekané chování nebo výpadky v lab prostředí, zejména na non-HCL zařízeních Je možné vypnout pomocí příkazů Pro zakázání vSAN Device Monitoring a tím i odpojování disků/diskových skupin: esxcli system settings advanced set -o /LSOM/VSANDeviceMonitoring -i 0 Pro zakázání vSAN Slow Device Unmounting (monitorování pokračuje): esxcli system settings advanced set -o /LSOM/lsomSlowDeviceUnmount -i 0

19 Novinky ve verzi vSAN 6.2 – 1/5
Změna licencování Stretched cluster již není v edici Advanced, ale až v Enterprise Vlastníci licence Advanced získají bezplatně licenci Enterprise (KB ), ale zvýší se jim cena SnS Deduplication & Compression Vyžaduje All-Flash konfiguraci Aktivuje se na úrovni clusteru, není možné vybrat jen některé hosty Deduplikaci a kompresi není možné aktivovat nezávisle Deduplikační blok má pevnou velikost 4kB Deduplikace probíhá během přesunu dat z write cache do capacity tier Komprese probíhá ihned po deduplikaci, používá extrémně rychlý algoritmus LZ4 Blok se uloží komprimovaný pouze pokud je výsledná velikost 2kB nebo menší Přidaná zátěž CPU by neměla překročit 5% Deduplikační poměr je mezi 2x a 7x, kde poměr 7x lze očekávat u VDI full clone desktopů a poměr 2x u SQL databáze

20 Novinky ve verzi vSAN 6.2 – 2/5
Erasure Coding (RAID-5/6) Vyžaduje All-Flash konfiguraci Aktivuje se výběrem hodnoty „Erasure Coding“ v položce „Fault Tolerance Method“ ve VM Storage Policy V závislosti na nastavení FTT (Failures to Tolerate) se pak použije RAID-5 nebo RAID-6 FTT=1 => RAID-5: 3 data blocks + 1 parity block FTT=2 => RAID-6: 4 data blocks + 2 parity blocks Výrazná úspora diskového prostoru 100GB vdisk s FTT=1 & FTM=RAID-1 set => vyžaduje 200GB diskového prostoru 100GB vdisk s FTT=1 & FTM=RAID-5/6 set => vyžaduje GB diskového prostoru 100GB vdisk s FTT=2 & FTM=RAID-1 set => vyžaduje 300GB diskového prostoru 100GB vdisk s FTT=2 & FTM=RAID-5/6 set => vyžaduje 150GB diskového prostoru Zvyšují se požadavky na minimální počet nodů v clusteru na 4 pro RAID-5 a 6 pro RAID-6 IPv6 support Podpora vSAN v čistě IPv6 prostředí, v L2 i L3 implementacích Podpora mixed-mode pro upgrade

21 Novinky ve verzi vSAN 6.2 – 3/5
Sparse Swap files Umožňuje neplýtvat diskovým prostorem na VM swap file v prostředích, kde nikdy nedojde k jeho použití VM swap file má velikost odpovídající vRAM daného VM a dosud byl alokován v režimu thick Aktivuje se nastavením advanced configuration parametru „/VSAN/SwapThickProvisionDisabled“ Bezpečné použití pouze v prostředí bez memory over-commitment Checksum / disk scrubbing Zajišťuje integritu dat Pro každý zapisovaný 4kB blok dat vSAN vypočte kontrolní součet (5-byte) a uloží jej odděleně od dat samotných Při čtení se provede porovnání, v případě neshody vSAN načte data z repliky/dopočítá z parity a vadný blok je nahrazen Ve výchozím nastavení je povoleno na úrovni clusteru, ale je možné zakázat per VM pomocí VM policy Pro ochranu nepoužívaných dat slouží na pozadí běžící scrubbing proces Dostupné v all-flash i hybrid konfiguracích

22 Novinky ve verzi vSAN 6.2 – 4/5
Quality of Service / Limits Umožňuje pomocí policy nastavit limit IOPS pro daný VM In mem read caching Využívá 0,4 % kapacity RAM (max. 1GB) pro dynamickou read cache Client-side cache => bloky daného VM jsou ukládány do cache na tom serveru, kde je VM aktuálně spuštěn Integrated Performance Metrics Umožňuje získat přehled o zdraví, kapacitě a výkonu vSAN bez nutnosti používat externí nástroje jako je vSAN Observer nebo vROPS Performance Service využívá vlastní databázi v podobě vSAN objektu, takže nezatěžuje vCenter Server ani nevyžaduje externí DB Velikost databáze je ~255GB a je možné ji chránit standardními prostředky (mirroring nebo erasure coding) Ve výchozím nastavení je služba vypnutá z důvodu úspory diskového prostoru Enhanced Health Service Přidána kontrola všech nových funkcionalit včetně sledování výkonu Proaktivní rebalance

23 Novinky ve verzi vSAN 6.2 – 5/5
Application Support Přidána podpora SAP Těsnější integrace s Horizon View Problematic Disk Handling improvements Pokud dojde k odstranění podkladového problému, vSAN se pokusí připojit disk/diskovou skupinu zpět Stretched Cluster improvements V případě split-brain situace podle VMware KB mohlo dojít ke vzniku „ghost“ VM v non-preferred site. Ty bylo dříve nutné odstraňovat ručně nebo pomocí skriptu, nyní to díky lepší spolupráci s vSphere HA provádí vSAN automaticky.

24 Novinky ve verzi vSAN 6.5 – 1/2
Změna licencování All-Flash vSAN cluster je možné používat i s licencí Standard, nejsou však dostupné funkce deduplikace, komprese a RAID-5/6 Nová edice Advanced for ROBO Podpora iSCSI Umožňuje vytvořit iSCSI targety a LUNy a prezentovat je mimo vSAN cluster pro další využití Podpora MSCS Implementace nativně v kernelu bez appliance Konfigurační maxima: 1024 LUNs per cluster 128 sessions per node 128 targets per cluster LUN size 62TB Dostupná veškerá vSAN funkcionalita – RAID-1/5/6, deduplikace, komprese

25 Novinky ve verzi vSAN 6.5 – 2/2
Direct Connect a oddělení witness od datové komunikace pro 2-node clustery Nody 2-nodového clusteru je nyní možné propojit přímo kabely bez nutnosti fyzického switche Oddělení witness komunikace a datové komunikace umožňuje posílat datovou komunikaci přes jeden vmkernel adaptér přímým propojením a witness komunikaci přes jiný vmkernel adaptér na witness node Podpora 512e (emulation) disků 4k (native) disky stále nejsou podporovány PowerCLI cmdlets pro vSAN Nové cmdlety pro Health Check and remediation Capacity and Resync Monitoring Proactive testing 2 node and stretched cluster support iSCSI configuration Podpora Cloud Native Apps na platformě Photon

26 Novinky ve verzi vSAN 6.6 – 1/5
Secure Data with vSAN Data-at-Rest Encryption Podpora šifrování dat Vestavěno přímo do vSAN, bez appliance Pracuje na úrovni hypervizoru, je tedy nezávislé na VM Na rozdíl od VM Encryption ve vSphere 6.5 pracuje na nejnižší úrovni a nemá tedy negativní dopad na deduplikaci a kompresi Nezávislé na HW, nevyžaduje SED (self-encrypting drives) Podporuje All-Flash i hybridní konfigurace Používá AESNI – Advanced Encryption Standard Native Instruction Health Check Service ověřuje, zda všechny nody v clusteru podporují AESNI Vyžaduje licenci Enterprise Je nezbytné zajistit funkční mechanismus zálohování/obnovy KMS (Key Management Server), při jeho poškození hrozí nevratná ztráta dat! Highly Available Management with the ESXi Host Client Umožňuje správu vSAN i při nedostupnosti vCenter serveru

27 Novinky ve verzi vSAN 6.6 – 2/5
More Intelligent Rebuilds Pokud je to výhodnější, umožňuje zrušit již probíhající rebuild a použít původní objekt, pokud se server vrátí do clusteru po výpadku delším než 60 minut Umožňuje rozdělení velkých objektů na menší části, takže je snazší provést rebalancing Opravuje maximální možný počet chybějících (absent) nebo degradovaných objektů, i když není dostatek prostředků pro úplné vyhovění storage policy Podrobnější zobrazení stavu objektů v sekci vSAN Health Možnost omezení využití přenosové kapacity při resynchronizaci objektů Degraded Device Handling (DDH) Vylepšená detekce degradovaných a selhávajících zařízení Průběžná analýza stavu zařízení umožňuje proaktivně přesouvat data na jiná zařízení ještě před selháním Pokud je k dispozici dostatečná kapacita, nevyžaduje žádný zásah administrátora Capacity and Policy Pre-Checks Umožňuje zobrazit předpokládaný dopad plánovaných akcí na cluster při operacích jako je přepnutí serveru do Maintenance modu, vyřazení serveru z clusteru, odebrání disku či odstranění diskové skupiny

28 Novinky ve verzi vSAN 6.6 – Capacity and Policy Pre-Checks

29 Novinky ve verzi vSAN 6.6 – Capacity and Policy Pre-Checks

30 Novinky ve verzi vSAN 6.6 – 3/5
Enhanced Stretched Clusters with Local Failure Protection Umožňuje zajistit redundanci úložiště v rámci lokality a mezi lokalitami současně Již není nutné při rebuildu po výpadku disku nebo serveru přenášet data ze vzdálené lokality Podporuje zrcadlení (RAID-1) mezi lokalitami a v rámci lokality pro hybridní konfigurace Podporuje zrcadlení (RAID-1) mezi lokalitami, zrcadlení a distribuovanou paritu (RAID-5/6) v rámci lokality pro All-Flash konfigurace Site Affinity for Stretched Clusters Ne všechny provozované aplikace vyžadují ochranu proti výpadku lokality – např. vývojová či testovací prostředí Některé aplikace mají vlastní úroveň redundance a není je tedy nutné chránit – např. MS Exchange Server (DAG) a MS SQL Server (AAG) Může výrazně ušetřit přenosovou kapacitu mezi lokalitami Cloud-friendly Networking with Unicast Již není vyžadován multicast pro clusterovou komunikaci Výrazně usnadní návrh a implementaci Stávající clustery po upgradu na vSAN 6.6 přestanou multicast používat Of course, with all these things there are caveats. For example, if the on-disk format has not been upgraded to the latest version 5, and a pre-vSAN 6.6 host is added to the cluster, then the cluster reverts to multicast. On the other hand, if you have upgraded to on-disk format v5, and then add a pre-vSAN 6.6 host to the cluster, the cluster will continue to talk unicast, but this newly added host can only talk multicast so it will be partitioned. If the cluster is at 6.6, and the on-disk format is v5, don’t add any pre-vSAN 6.6 hosts to the cluster.

31 Novinky ve verzi vSAN 6.6 – Enhanced Stretched Clusters with Local Failure Protection

32 Novinky ve verzi vSAN 6.6 – Site Affinity for Stretched Clusters

33 Novinky ve verzi vSAN 6.6 – 4/5
vSAN Cloud Analytics Zobrazuje proaktivní notifikace o možných problémech a poskytuje doporučené postupy řešení problémů v reálném čase Posílá data o vSAN infrastruktuře ke zpracování do VMware Aktivuje se povolením CEIP (Customer Experience Improvement Program) Management at Scale Rozšíření API a PowerCLI cmdlets o nové funkce vSAN Easier Deployment and Configuration Funkce vSAN Easy Install zajistí instalaci prvního nodu vSAN clusteru v průběhu instalace vCSA, tj. nakonfiguruje první ESXi server pro vSAN a umístí na něj vCSA bez nutnosti vytvoření/připojení dočasného datastoru V dalším kroku se spustí vSAN Configuration Assist a usnadní administrátorovi splnění dalších požadavků vSAN, např. vytvoření vmkernel interface na všech nodech jedním kliknutím, aktualizaci OEM ovladačů a FW, optimalizaci nastavení pro vSAN atd. Enhanced Health Monitoring Rozšířené kontroly HW proti HCL nesledují jen aktuálnost verzí OEM ovladačů a FW, ale umožňují i jejich stažení a aktualizaci

34 Novinky ve verzi vSAN 6.6 – 5/5
vRealize Operations Management Pack for vSAN Up to 50% Greater Performance (proti vSAN 6.5 na All-Flash konfiguracích) Reduced overhead of checksum Improved deduplication and compression Destaging optimizations Object Management improvements iSCSI for vSAN performance improvements Support for the Latest Hardware Innovations Intel Optane NVMe SSDs 3D Xpoint >1.6TB SSDs New Apps Podpora Big Data aplikací – Intersystems Caché, Hadoop a další XenDesktop a XenApp Integrace s Mesos, Kubernetes a Swarm Podpora Photon 1.1 Nový Docker Volume Driver umožňuje multi-tenancy, snapshoty a klonování

35 VMware Hands-on Labs VMware HOL – Hands-on Labs vSAN laby
Přístupné zdarma po registraci Přihlášení do portálu pomocí účtu MyVmware Enrollment konkrétního labu vyžaduje registraci/přihlášení dalším účtem Časově omezená doba přístupu, ale je možné ji až 8x prodloužit Odpočet se zastaví po 15 minutách nečinnosti vSAN laby HOL-1708-SDC-1 - Virtual SAN 6.2 from A to Z HOL-1708-SDC-2 - Virtual Volumes and Storage Policy Based Management HOL-1731-SDC-1 - vSAN v6.5: What's New HOL-1731-USE-2 - vSAN v6.5 Advanced: Operations HOL-1751-MBL-4 - Horizon 7: Architecture and Performance HOL-1708-CHG-3 - Virtual SAN 6.2: Challenge Lab

36 TechData Demo & Lab centrum
Horizon View 7 all-flash storage IBM možnost využití učeben TechData Academy pro testování vSAN 6 hybridních (SSD + HDD) storage&compute nodů + 1 compute-only node vROPS + vRealize Log Insight, vSAN Assessment propojení s Horizon, NSX Airwatch on-premises propojení s Active Directory, certifikační autorita a MS Exchange NSX Network Insight + NSX Assessment další prvky a technologie: Distribuovaný Firewall pro VM Load balancer Edge - VPN terminace a NAT Fyzická L3 topologie s L2 logickou topologií pro VM pomocí VXLAN

37 Děkujeme za pozornost !