Software Defined Storage – Virtual SAN

vsan11VMware sin visjon er at all infrastruktur på datarommet skal virtualiseres på samme måte som man gjør med servere.
Dette inkluderer både nettverk, sikkerhet og ikke minst datalagring.

VMware Software Defined Storage er et rammeverk der VMware og partnere kan tilby datalagring med tilhørende tjenester, hvor administrasjon og kontroll er automatisert av intelligent programvare.

Målsetningen er å flytte intelligens opp fra underliggende lagringskontrollere til et felles programvarestyrt tjenestelag.
Unike maskinvare-egenskaper kan fortsatt utnyttes via standardiserte grensesnitt som VAAI, VASA og vVols. Integrasjon mellom maskinvare og VMware er derfor nøkkelen til sameksistens.

Man oppnår større flesibilitet, og man kan enkelt flytte tjenester mellom datarom uten å ta hensyn til maskinvare i like stor grad som tidligere.   Man kan f.eks enkelt speile volumer mellom systemer fra ulike leverandører ved hjelp funksjonalitet som ligger i vSAN tjenestelaget.

Dette er ikke noe VMware gjør alene,  hele lagringsbransjen støtter opp om dette nye rammeverket som illustrasjonen under viser (produsentene listet under er bare et lite utvalg).
Denne brede støtten differensierer VSAN fra tilsvarende løsninger i bransjen.

sds-vfokus1

 

Et modulært rammeverk

Rammeverket støtter både eksisterende SAN/NAS løsninger samt en ny konvergert server/lagrings plattform fra VMware – Virtual SAN.
Egenskaper som flash caching, speiling, snapshot, deduplisering, kryptering etc. kan legges til som en felles tjeneste uavhengig av underliggende hardware.

selvbetjDu beskriver behovene (kapasitet, ytelse og tilgjengelighet),  systemet sørger automatisk for å hente ressurser fra riktig sted og tildele dette granulært til hver enkelt tjeneste. 

sds-vfokus2

 

divider

Smartere tradisjonell lagring med VMware VVOLs

En av utfordringene med tradisjonell lagring er mangelen på granularitet.
Et felles LUN eller NFS filområde gir de samme egenskapene til alle virtuelle servere som tilknyttes dette volumet.
Med Virtual Volumes (VVOL) planlegger VMware å gjøre dette mye mere granulært.
Hver enkelt virtuelle server kan nå allokere den plassen den trenger med de egenskapene som er nødvendig for å møte gitte SLA krav.

Virtual Volumes vil ikke se dagens lys før neste år, men du kan allerede nå se en teknologi demo fra flere av av VMware sine partnere.  Virtual Volumes krever at produsenten av lagringssystemet støtter vVol teknologien gjennom grensesnittene som er tilgjengelig.
Les videre

VMware Software Defined Storage, Del 1: Virtual Volumes

Vi står foran store endringer i måten VMware jobber mot underliggende datalagringsinfrastruktur.
Under årets VMworld konferanse var flere sesjoner viet til dette tema.
Husk at dette er fortsatt under utvikling,  det ferdige produktet kommer ikke før en gang neste år. 

I en serie på tre blogg artikler skal vi se nærmere på fremtidens lagringsteknologier fra VMware, først ute er Virtual Volumes.

Selv om mye av infrastrukturen på datarommet er virtualisert, brukes fortsatt de samme gamle mekanismene for tildeling av lagringskapasitet .

VMware ønsker nå å endre på dette. En rekke nye teknologier er under utvkling, både for å forbedre tradisjonell SAN/NAS infrastruktur, men også å supplere disse med en distribuert lagringsarkitektur basert på lokaldisk (DAS).

Teknologiene bak VMware Software Defined Storage er:

  • Virtual Volumes (vVols)
  • Virtual Flash
  • Distributed Storage (vSAN)

VMware sin visjon

Man skal kunne samle ressurser fra alle typer lagring (SAN/NAS/DAS/Flash) i store virtualiserte lagrings-pooler.
Man skal kunne opprette lagringsenheter basert på tjenesteprofiler istedet for fysiske begrensninger slik det er i dag.

Hver enkelt virtuelle maskin får akkurat det den trenger av kapasitet, ytelse og tilgjengelighet.  Du skal kunne tilpasse egenskapene helt ned på VMDK nivå, ikke på LUN/Volum nivå slik det er i dag.  Tjenesteprofilen til hvert enkelt objekt danner kjørereglene for autopiloten som tar hånd om videre styring.

Software Defined Storage

VMware kaller den nye lagringsmodellen «Software Defined Storage». Dette er en del av VMware sin nye tilnærming til nettskyen – The Software Defined Datacentre.

I tillegg til datalagring vil tilsvarende modeller brukes for nettverk, sikkerhet og tilgjengelighet.
Målet er å lage et datasenter med større fleksibilitet og enklere administrasjon.
Hva som tidligere tok flere dager eller uker, vil i fremtiden være redusert til minutter eller sekunder.

Les videre

Hva er nytt i VMware vSphere 5.1

VMware lanserer i dag vSphere 5.1 og en rekke andre produkter. Listen over nyheter og forbedringer er lang. VMworld  i San Francisco og Barcelona vil være arena for denne lanseringen og mange sesjoner er selvfølgelig viet dette.

VMware har kommet langt siden oppstarten for over 10år siden. Fra å levere en hypervisor har VMware nå et komplett økosystem for datasenteret og nettskytjenester.  VMware kaller den nye tilnærmingen til cloud: The Software Defined Datacenter.

I tilegg til kjerneproduktet vSphere 5.1, lanserer VMware oppdateringer på en rekke andre produkter:  vCenter Server 5.1, vCloud Director 5.1, vCenter Orchestrator 5.1, vCenter Site Recovery Manager 5.1, vCloud Networking and Security 5.1, og vCenter Heartbeat 6.5.
VMware lanserer også vCloud Suite 5.1 som samler flere av disse til en pakke.

vShield har skiftet navn og kalles nå vCloud Networking and Security.
En annen gledelig nyhet er bortfallet av vRAM lisensiering!
Standardutgaven har også fått en del egenskaper som tidligere var forbeholdt større versjoner. Dette inkluderer bla. Storage vMotion, Fault Tolerance, hot add CPU/RAM.

Her er en liste over noen av nyhetene

  • Ny og kraftig forbedret vSphere Web klient.  Støtter alle funksjoner. Skalerer bedre, raskere, enklere og mere intuitiv.  Se screenshot over.
  • Auto Deploy forbedringer med «stateless caching» og «statefull install»
  • Sigle Sign On (SSO).  Forenkler login for hele «Cloud Infrastructure» suiten.
  • Tagging Service.   Du kan tagge objekter i vCenter Server for bedre organisering og raskere søk.
  • Opp til 64 virtuelle CPU´er (vCPU)
  • Virtual Shared Graphics Acceleration (vSGA)
  • Windows 8 og Windows Server 2012 støtte
  • VMware Tools forbedringer
  • Forbedret nettverksstøtte:
    Network Health Check, Port Mirroring, Config Backup & Restore, Roll Back & Recovery, LACP support on VDS
  • SNMP v3 støte
  • Forbedret Site Recovery Manager (SRM). SRM er nå en 64bit prosess for bedre skalerbarhet. Failback støtter nå vSphere replikering i tilegg til array basert.  Automatisk «Reprotect».   Forced Failover for alle typer beskyttelsesgrupper.
  • Kombinere vMotion og Storage vMotion i samme operasjon. Migrere mellom verter/clustre uten delt lagring  (shared nothing vMotion).
    Les videre

EMC VNX Unified Storage – Under panseret

Januar 2011 lanserte EMC VNX familien.  En Unified SAN og NAS plattform som erstattet både Clariion og Celerra produktene. VNX har på kort tid rukket å bli en av de mest populære lagringsystemene i Norge med flere hundre leveranser til Norske kunder.

EMC har utvidet Unified begrepet til å omfatte objektlagring med VNX.  Fra en og samme virtualiserte storagepool kan man presentere ut både blokk, fil og objektdata.  EMC Unispshere gir enkel og sentralisert administrasjon av alle typer data. En rekke avanserte tjenester kjøres i bakgrunnen for å gi den beste ytelsen og effektiv plassforbruk. Du kan lese mere om FAST Autotiering og FAST Caching i denne artikkelen.

VNX Egenskaper

  • Ny backend arkitektur med SAS2 (ingen støtte for FC disker)
  • Skalerbar opp til 1000stk disker og 3PB kapasitet
  • Unified SAN og NAS med FC, FCoE, iSCSI, CIFS, NFS, pNFS og MPFS
  • EMC Unisphere – Svært enkel WEB basert administrasjon
  • Autotiering
  • EMC FAST Cache
  • Thin Provisioning med Zero Space Reclaim
  • Deduplisering og komprimering
  • VNX Snapshots – 256 snaps per lun, snap av snap, ingen degradering av ytelse!
  • Katastrofesikring med synkron/asynkron speiling
  • Støtte for både 2-site og 3-site synkron speiling
  • Katastrofesikring kontinuerlig beskyttelse CDP og CRR
  • File level retention (FLR) og WORM funksjonalitet
  • Antivirus integrasjon
  • Backup integrasjon (NDMP)
  • Microsoft Active Directory integrasjon
  • Microsoft DFS støtte som «root server» eller «leaf-node»
  • Microsoft Windows 2008 R2 og Windows Server 2012 sertifisert
  • Støtte for Microsoft SMB 3.0 og ODX
  • Støtte for Microsoft Branch Cache
  • Tett applikasjonsintegrasjon mot bla. VMware, Microsoft Hyper-V, Citrix, Exchange, SQL, Oracle og DB2.
  • Full VMware 4.x og 5.x støtte med VAAI og VASA – Bransjens beste integrasjon!
  • EMC Virtual Storage Integrator (VSI) for administrasjon av VNX direkte fra vCenter

Kombinert SAN og NAS

EMC har med VNX lagt stor vekt på at SAN blokklagring  ikke må gå veien om forsinkende mellomledd. Alle blokkvolumer håndteres av dedikerte kontrollere koblet til en felles backend med filclusteret.  Blokkvolumer (LUNs) presenteres direkte ut fra disse kontrollerne raskt og effektivt. Tilkoblingene er modulære og du kan velge mellom FC, FCoE og iSCSI (fri kombinasjon).
På denne måten oppnår man god ytelse for både blokk- og fildata.   Alt er tett integrert og administrert fra samme verktøy –  EMC Unisphere.
Les videre

Stor VNX oppgradering er klar!

EMC lanserte i dag en stor kodeoppgradering for VNX familien.
Dette er et resultat av flere års utvikling samt analyse av loggdata fra installerte systemer.  Koden gir en rekke nye egenskaper og forbedringer til VNX.

Da jeg begynte hos EMC for snart 5 år siden møtte jeg utviklerne i Boston.  De presenterte den gangen en langsiktig plan som viste hvordan lagringsystemene Clariion (SAN) og Celerra (NAS) skulle forenes og kraftig moderniseres.
Utviklerne holdt hva de lovet,  og lanserte våren 2011 VNX som kombinerte det beste fra Clariion og Celerra i et og samme system.  Nyhetene var mange:  Ny SAS-2 basert hardware, 3X bedre ytelse, nytt brukergrensesnitt, automatisering med tiering og caching samt en rekke andre egenskaper.

Som alltid i slike utviklingsprosjekter så er det noe som ikke blir ferdig i tide.  En del av det som var planlagt hadde for mange avhengigheter mot gammel kode. Istedet for å gjøre det halvveis, ble det derfor besluttet å gjøre en total omskriving av en del grunnlegende mekanismer.

Dagens lansering er et resultat av dette og gir en rekke nye egenskaper og forbedringer:

  • Ny generasjon FAST Autotiering med Flash 1st policy.
  • Ny generasjon VNX Snapshots med 256 snaps pr. LUN
  • Støtte for AppSync for applikasjonskonsistente snapshot
  • Bedre plassutnyttelse med nye anbefalte RAID oppsett (R5 8+1, R6 14+2)
  • Mix av ulike RAID nivåer i samme pool
  • Pool utvidelse med automatisk rebalansering/restripe for bedre ytelse
  • Tier lastbalansering/restripe for bedre ytelse og eliminering av «hotspots»
  • Forbedret FAST Cache filter for sekvensiell IO med små blokker
  • Bedre ytelse på Thin LUNs.
  • Microsoft BranchCache støtte for Windows 7/2008 R2
  • Klargjort for vSphere 5.1
  • Forbedret VMware VASA støtte,  både blokk og fil volumer (ikke behov for EMC solutions enabler)
  • Rapportering av alarmer og hendelser til vCenter via VASA
  • Forbedret VMware VAAI Thin Provision Zero Space Reclaim og VAAI XCOPY
  • Støtte for VMWare VAAI aksellerasjon av NFS snap av snap på VM nivå.  Tilpasset VMware View og vCloud Director.
  • Optimalisering av vSphere 5.1 multipathing
  • Forbedrede EMC Unisphere support funksjoner
  • Samkjørt ytelsesinformasjon for blokk og fil med detaljert rapportering
  • Forbedret realtime informasjon om ytelse for CIFS og NFS filområder
  • Forbedret CIFS og NFS  «file-level retention» som møter SEC 17a-4(f) og SOX krav
  • Støtte for dyp komprimering med opp til 65% plassbesparelse
  • Nye og forbedrede 10GbE moduler med høyere ytelse (10GbE Optisk og 10GBaseT)
  • VNX7500 96GB (48+48) cache opsjon
  • Oppgradering fra liten til større VNX modell er støttet (f.eks. fra 5300 til 5700)

Litt av en liste !

Versjonsnummer på denne oppgraderingen er:
Block OE version – 05.32.000.5.006
File OE version – 7.1.47.5

Denne koden kan hentes ned gratis fra EMC sine supportsider.

Som dere ser så er det mange oppdateringer relatert til VMware og klargjøring for vSphere 5.x som er rett rundt hjørnet.  Mer om dette over sommerferien.

Utviklerne i EMC ser ut til å like fjellkjeder i USA.
Denne lanseringen hadde kodenavn «Inyo»,  den forrige het «Franklin».    Men her hviler ingen på noen laubær.  «Rockies» er neste,  men vi må smøre oss med litt tolmodlighet… 😉

Rocky Mountains
Foto: Wikitravel/PD-USGov-NPS