EMC Isilon – Big Data i praksis

Markedet for ustrukturerte fildata er i sterk vekst.
EMC kjøpte i 2010 opp Isilon Systems for å styrke sin satsning innenfor dette området.

EMC Isilon er spesiallaget for store mengder ustrukturerte fildata og støtter alle ledende protokoller inkludert HDFS – Hadoop  Distributed File System.

Dette er plattformen for store mengder data – Big Data

Du har nok sikkert opplevd tjenester levert av EMC Isilon selv om du ikke var klar over det. Mange film- og TV produksjons selskaper verden over baserer seg på denne plattformen.  Verdens ledende online leverandører av musikk, film og TV underholdning bruker EMC Isilon.

 

De største leverandørene av sosiale medier bruker EMC Isilon. Mange av de største selskapene innenfor olje og gass sektoren bruker Isilon for å lagre data som analyseres i jakt på nye forekomster av olje og gass.  Sykehus bruker Isilon til å lagre pasientjournaler og data fra bildediagnostiske undersøkelser (MR, CT, røntgen, ultralyd etc.).
Bruksområdene er som du skjønner svært mange.  Fellesnevneren er store krav til kapasitet og ytelse.

Big Data – Få frem verdien i dine data

Jeg har tidligere snakket om Unified Storage og NAS og at ustrukturerte fildata utgjør over 90% av det totale lagringsbehovet i verden. Dette bekreftes av bla. undersøkelser fra IDC som viser en eksplosiv vekst av filbaserte data.

For 10 år siden skulle alle ha SAN,  nå er det fillagring med NAS og SAN+NAS Unified Storage som er i vinden.

Big Data handler ikke bare om store mengder med data.   Nye applikasjoner og arbeidsmetoder stiller helt andre krav til ytelse, fleksibilitet og skalerbarhet enn tidligere.

Big Data dreier seg også om å hente forretningsverdi ut av data, både eksisterende og nye.
Olje og gass industrien er et godt eksempel på dette.   Ny teknologi gjør at man kan analysere innsamlede data mere detaljert.  Tradisjonelt var dette en tidkrevende lineær prosess, men ny teknologi gir nå forskerne fritt spillerom til å kjøre mange prosesser i parallell, endre på parametre og raskt kjøre analysen på nytt.  Dette var en umulig arbeidsmåte tidligere.

EMC Isilon Arkitektur – Verdens raskeste NAS

EMC Isilon bygger på en scaleout cluster arkitektur hvor hver node i clusteret inneholder både lagringskapasitet, nettverk- og kontrollerkraft.  All denne kraften og kapasiteten gir clusteret en samlet ytelse som langt overgår tradisjonelle systemer.

Ulike data har ulike behov,  derfor finnes det noder med forskjellige egenskaper:
Les videre

EMC VNX Unified Storage – Under panseret

Januar 2011 lanserte EMC VNX familien.  En Unified SAN og NAS plattform som erstattet både Clariion og Celerra produktene. VNX har på kort tid rukket å bli en av de mest populære lagringsystemene i Norge med flere hundre leveranser til Norske kunder.

EMC har utvidet Unified begrepet til å omfatte objektlagring med VNX.  Fra en og samme virtualiserte storagepool kan man presentere ut både blokk, fil og objektdata.  EMC Unispshere gir enkel og sentralisert administrasjon av alle typer data. En rekke avanserte tjenester kjøres i bakgrunnen for å gi den beste ytelsen og effektiv plassforbruk. Du kan lese mere om FAST Autotiering og FAST Caching i denne artikkelen.

VNX Egenskaper

  • Ny backend arkitektur med SAS2 (ingen støtte for FC disker)
  • Skalerbar opp til 1000stk disker og 3PB kapasitet
  • Unified SAN og NAS med FC, FCoE, iSCSI, CIFS, NFS, pNFS og MPFS
  • EMC Unisphere – Svært enkel WEB basert administrasjon
  • Autotiering
  • EMC FAST Cache
  • Thin Provisioning med Zero Space Reclaim
  • Deduplisering og komprimering
  • VNX Snapshots – 256 snaps per lun, snap av snap, ingen degradering av ytelse!
  • Katastrofesikring med synkron/asynkron speiling
  • Støtte for både 2-site og 3-site synkron speiling
  • Katastrofesikring kontinuerlig beskyttelse CDP og CRR
  • File level retention (FLR) og WORM funksjonalitet
  • Antivirus integrasjon
  • Backup integrasjon (NDMP)
  • Microsoft Active Directory integrasjon
  • Microsoft DFS støtte som «root server» eller «leaf-node»
  • Microsoft Windows 2008 R2 og Windows Server 2012 sertifisert
  • Støtte for Microsoft SMB 3.0 og ODX
  • Støtte for Microsoft Branch Cache
  • Tett applikasjonsintegrasjon mot bla. VMware, Microsoft Hyper-V, Citrix, Exchange, SQL, Oracle og DB2.
  • Full VMware 4.x og 5.x støtte med VAAI og VASA – Bransjens beste integrasjon!
  • EMC Virtual Storage Integrator (VSI) for administrasjon av VNX direkte fra vCenter

Kombinert SAN og NAS

EMC har med VNX lagt stor vekt på at SAN blokklagring  ikke må gå veien om forsinkende mellomledd. Alle blokkvolumer håndteres av dedikerte kontrollere koblet til en felles backend med filclusteret.  Blokkvolumer (LUNs) presenteres direkte ut fra disse kontrollerne raskt og effektivt. Tilkoblingene er modulære og du kan velge mellom FC, FCoE og iSCSI (fri kombinasjon).
På denne måten oppnår man god ytelse for både blokk- og fildata.   Alt er tett integrert og administrert fra samme verktøy –  EMC Unisphere.
Les videre