Hjem » Content Management » Digital lagring muliggjør etterproduksjon under pandemien

Digital lagring muliggjør etterproduksjon under pandemien


AlertMe

Tom Coughlin, Coughlin Associates

Covid-19-pandemien har drevet mange etterproduksjonsorganisasjoner til fjernarbeid. Dette har forårsaket endringer i måten medieinnholdet lagres på. Et viktig element er en større avhengighet av skylagring, enten fra et privat datasenter eller gjennom hyperskala skylagringsleverandører. I denne artikkelen vil vi se på våre anslag for den totale veksten av lagring etter produksjon, og deretter er tilbud og innsikt fra IBC 2020, 2020 NAB Show New York og forskjellige firmainformasjoner som vil hjelpe etterproduksjonsanlegg til å fortsette driften, kontrollere kostnadene og øke produktiviteten.

Figuren nedenfor viser den årlige etterspørselen etter lagringskapasitet for etterproduksjon, inkludert NLE, og bryter ut direkte tilknyttet og nettverksbasert lagringskapasitet etter produksjon[1]. Vi inkluderer en separat breakout av ekstern lagring (sky) for samarbeidsflyter. Merk at på grunn av Covid-19-pandemien og mange som jobber hjemme gjennom det meste av 2020 og sannsynligvis en del av 2021, projiserer vi en betydelig støt i bruken av skylagring for etterproduksjon med start i 2020 sammenlignet med 2019 (fra 8% til 20%) og fortsetter å øke gjennom 2025.

Med veksten i skylagring etter produksjon, vil vi først se på utviklingen som inkluderer skylagring i arbeidsflyter for media og underholdning fra forskjellige leverandører. 

Skylagring for ekstern postproduksjon

AvidNexis 2020-lagringsløsningen gir samarbeidsflyt fra hvor som helst på rich media. Det gir også 40% mer delt lagring i samme fotavtrykk ved hjelp av harddisker med høyere kapasitet, optimaliserer speiling av innhold for å eliminere nedetid og datatap og fleksibel lagring som kombinerer lokale og skyressurser. Det gir også bredere støtte for tredjepartsverktøy.

Interessen for å bruke skyen i arbeidsflyter etter produksjonen øker.  Avid gjorde en undersøkelse av sine kunder i 2020 før Covid-19-pandemien traff og fant at bare 20% av kundene ikke planlegger å bruke skylagring, mens 40% sa at de ville bruke mindre enn 100 TB, 30% sa at de ville bruke 0.5-1PB og 10% sa at de ville bruke mer enn 1PB skylagring. Figuren nedenfor viser Avidsitt utvalg av lagringsprodukter inkludert Avid Nexis / Cloudspaces for å integrere lokalt til skylagring.

Avid sa også at det har gjort en myk lansering av løping Avid Media Composer på en virtuell maskin og bruker Kubernetes-containere i et redigeringsmiljø, tilgjengelig med Teredici, med Nexis skylagring som gir redigering etter behov som vist nedenfor.

Scale Logic viste det Remote Access Portal, et 1U Linux-apparat som muliggjør ekstern tilgang til lokal lagring for både proxy- og høyoppløselige arbeidsflyter, som vist nedenfor. Merk at en ekstern klient lokal HDD eller SSD kan brukes som lokal cache for å forbedre ytelsen.

Synkroniseringsprosesser skjer i bakgrunnen uten at en redaktør trenger å gjøre noe, og et lagret prosjekt synkroniseres automatisk til den lokale lagringen automatisk, slik at andre kan se endringene.

EditShare Ble tildelt NAB Show årets produkt på NAB NY-konferansen 2020. Selskapet ga ut en ny versjon av EFS 2020-filsystemet i juli 2020. Ifølge selskapet, “Det medieoptimaliserte filsystemet har sikkerhetsforbedringer på hvert lag og forbedret ytelse over hele linjen. I tillegg til de kraftige verktøyene for lagringsadministrasjon innebygd i EFS, åpner den nye RESTful API døren for kunder og teknologipartnere for å automatisere avanserte arbeidsflyter for lagringsadministrasjon i et sikkert miljø. EFS er fullt kompatibelt med den nyeste versjonen av FLOW, og gjør det mulig for medieorganisasjoner å bygge omfattende samarbeidsarbeidsflyter, og beskytte kreativt personell mot den underliggende tekniske kompleksiteten, samtidig som de utstyrer tekniske team med et omfattende sett med mediehåndteringsverktøy. "

Den siste versjonen av EFS støtter arbeidsflyter i skyen, inkludert AWS, Tencent Cloud og andre. IT-ledere og administratorer har finkornet kontroll over innhold, mappestrukturer og innholdsflyt for å muliggjøre bedre samarbeid på tvers av flerside- og flerprosjektoperasjoner.

EditShare sa også at det har hjulpet kringkastere og medieselskaper med å øke produksjonen av ekstern innholdsproduksjon med sin EFS-lagring og FLOW mediehåndteringsløsning. Selskapet sa at det filippinske langdistanseselskapet (PLDT) i løpet av pandemien implementerte selskapets samarbeidsløsninger for å automatisere mer enn 50 manuelle arbeidsflyter og øke produksjonen av eksternt produksjonsinnhold med opptil 40%. Bildet nedenfor viser ekstern postproduksjon ved hjelp av EditShare produkter

Facilis var på 2020 virtuell NAB show NY.  Facilis gir delt lagring med høy ytelse for medieproduksjon i samarbeid. Selskapets nylige utvikling inkluderer versjon 8.05 av Facilis Shared Storage Systems, versjon 3.6 av FasTracker Media Asset Management-programvaren og den nye Facilis Edge Sync for ekstern tilgang for visning.

De Facilis Delt lagring versjon 8.05 inkluderer programvaredefinert båndbreddeprioritet, SSD-lagdeling og parisk disk. Båndbreddeprioritet leverer full gjennomstrømning til alle arbeidsstasjoner under normal drift, men prioriterer arbeidsstasjoner for å opprettholde større gjennomstrømning når serveren er i høy belastningstilstand. Denne prioritetsinnstillingen er dynamisk og kan påvirke klientens ytelse i løpet av sekunder etter søknaden.

Programvaredefinert flerdiskparitet kan aktiveres for opptil 4 stasjonsfeil per stasjonsgruppe, på et prosjektbasert, virtuelt volumbasis. Denne teknologien gjør det mulig for eiere av aldringssystemer å bedre beskytte eiendelene sine mot datatap på grunn av stasjonsfeil. SSD- og HDD-lagdeling ble utviklet for å levere dedikert hastighet for prosjekter som trenger ytelse på SSD-nivå, samtidig som det opprettholdes et evigvarende HDD-basert speil.

Facilis Edge Sync starter med Facilis Object Cloud-programvare som bruker en innfødt Facilis virtuelt volum som lokal diskbuffer og legger til en dedikert Azure Cosmos DB-database for å synkronisere flere skrivebord sammen til et enkelt filsystem. Med Facilis Edge Node installert på eksterne steder, banen til mediefilene og prosjektfilene er nøyaktig den samme, enten du jobber i hjemmet eller hjemme. Eventuelle endringer eller tillegg til prosjektfilene oppdateres øyeblikkelig på alle steder. Figuren nedenfor

Cinesite samarbeidet med Qumulo og AWS for å la animasjon og VFX-rørledninger utnytte Qumulosine hybride fildatatjenester for å levere opptil 16K gjengitt video. Når du står overfor problemer med periodisk frysing med en nylig kjøpt lagringsklynge Cinesite-tilnærming Qumulo, som raskt distribuerte maskinvarenoder på stedet og fikk selskapet til å kjøre igjen.

Senere, for å sprekke til skyen for å skalere gjengivelsesevnen, impolerer selskapet Qumulo skylagring som tillot organisasjonen å spinne opp maskiner og lagre data på AWS. EN Qumulo case study sier at “Qumulosin hybridfilprogramvare kjører det samme filsystemet for virksomheten i skyen som lokalt, og data kan replikeres naturlig og sømløst mellom forekomster eller på tvers av regioner. Sprengning til 20, 200 eller til og med 2,000 gjengivelsesnoder av høy kvalitet på AWS med Qumulo å holde tritt med all den kraften er ikke noe problem. Forekomster kan spinnes på få minutter, og rives ned like raskt. “

Integrated Media Technologies (IMT) kunngjorde at SoDA-programvaren har blitt integrert med Dalets Ooyala Flex Media Platform for å forenkle sikker overføring av kunstig intelligens og maskinlæringsinnhold til skyen. Integrasjonen av IMT SoDA-programvare og Dalets Ooyala Flex Media Platform tilbys i USA og Europa.

Den felles løsningen vil adressere kravene til datastyring av medieaktiva ved å effektivisere overføringen av arbeidsdata for store data mens den leverer en forenklet tilnærming til databevegelse for kreativt innhold. Kunder etter produksjon og medietjenester vil kunne forutsi kostnadene og tiden for å flytte filer ved hjelp av SoDA før en lagringsoverføring, slik at de kan ta smarte beslutninger om datahåndtering og holde prosjektkostnadene på eller under budsjettet.

Økt avhengighet av skyen med eksternt samarbeidsarbeid vil vokse i høyere takt etter at den nåværende pandemiopplevelsen er avsluttet. Enten i skyen eller i lokalene, vil forskjellige solid state-lagringsløsninger hjelpe redaktører med å håndtere den økende størrelsen på videoinnhold som krever lagring med høyere ytelse for å gi sanntidsopplevelsen som disse profesjonelle krever. La oss se på noen av de nyeste solid state-lagringsløsninger for M & E-industrien.

Solid State Storage Solutions

NetApps Cloud Manager tilbyr policystyrt administrasjon av applikasjonslagring og data på tvers av flere offentlige skyleverandører og lokale lokasjoner. The Spot by NetApp Product Suite tilbyr skyinfrastrukturanalyse, kostnadsoptimalisering, kapasitetsoptimalisering og arbeidsmessig optimalisering for Kubernetes-containere. Selskapets ONTAP 9.8 gir økt skyintegrasjon og datatilgjengelighet for bedriftsapplikasjoner. ONTAP 9.8 gir en hybrid skybufferarkitektur, kontinuerlig tilgjengelighet og enhetlig datahåndtering over SAN, NAS og objektlagring.

NetApp har lenge støttet Dreamworks-animasjon, som krever en balanse mellom lagringskapasitet og ytelse. Den nye FAS500f (vist nedenfor) er en all flash-kapasitetsorientert lagringsgruppe (opptil 734 TB rå kapasitet med en utvidelseshylle) som bruker QLC flash SSD-er for å gi høyere kapasitet. Dette produktet har NVMe-støtte fra ende til annen og administreres av NetApps ONTAP-programvare. Produktet er rettet mot ustrukturerte dataprogrammer med høyt volum, for eksempel media og underholdning og animasjon.

I 2020 viste IBC ATTO deres SiliconDisk RAM-baserte lagringsenhet med høy ytelse, med annonserte kapasiteter på 128 GB og 512 GB. Ved å bruke RAM, i stedet for flashminne, gir dette produktet mye høyere ytelse til en pris.

Dette produktet gir ventetid på mindre enn 600 ns og opptil 6.4 M 4K IOPS og dataoverføring båndbredde på opptil 25 GB / s. Den leveres med 4 100 Gb Ethernet-porter for totalt 400 Gb båndbredde. Ifølge selskapet, "Data lagres øyeblikkelig og hentes med utrolig hastighet, slik at du kan redigere flere videostrømmer, fange opp flere dataforekomster for AI / ML, manipulere flere datasett raskere, og gir utrolig ytelse til indeksoppslag."

SiliconDisk inkluderer en sanntidsoptimerer som gir ytelsesanalyse på lagringsnettverkstilkoblingene, lagringsutnyttelse og den generelle ytelsen til SiliconDisk-data. Den har også en xCORE I / O-akselerasjon, håndtering leser og skriver med nesten null ekstra prosesseringsomkostninger. Ved å bruke DRAM, i stedet for flashminne, trenger ikke systemet å administrere medieslitasje.

Excelero kunngjorde at DigitalFilm Tree brukte sin elastiske NVMe-lagring (NVMesh) for å gi 10 ganger raskere gjengivelsesbehandling og 100 ganger raskere lagring. Ifølge selskapet “NVMeshs programvaredefinerte distribuerte blokkeringslagring for høyytelses databehandlingsmengder gir brukerne bedre lagring. Kunder drar nytte av delte NVMe-ressurser over hele nettverket, tilgang til å fjerne NVMe med lokal hastighet - og ytelse som overstiger kapasitetsgrensen for lokal flash på servere.

I NVMesh kjører datastien utelukkende på klientsiden, og involverer ingen CPU-sykluser på serversiden. Dette er spesielt interessant for applikasjoner i overskala, da det ikke er noen støyende nabovirkning. En viktig komponent i NVMesh-arkitekturen er TOpology MAnager (TOMA), en intelligent klyngeadministrasjonskomponent som gir volumkontrollplanfunksjonalitet og muliggjør datatjenester som RAID, slettingskoding og datadeling (blant klientmaskiner). Den direkte effektive datastien fra applikasjonen til NVMe-lagringen er illustrert i bildet nedenfor.

Som et eksempel på NVMesh på jobben, produserer teamet Prime Rewind: Inside The Boys, et før-show for sesong 2 av Amazon Prime Videos superhelt- og årvåken serie Guttene, Sto DFTs system overfor en test til sin nye Excelero-drevne lagringsløsning. Produksjonsteamet trengte å behandle 40 timer med klientopplastede dagblader, sikkerhetskopiere dem, lage fullmakter for rask redigering, behandle og levere dem til redaksjonen - på bare 10 timer.

VAST tilbyr det de kalte sin Data Universal Storage som bruker Intel Optane NVMe SSD som et hurtiglagerlag for et QLC NVMe-lagringslag som vist nedenfor. Selskapet sier at denne lagringsarkitekturen gir lagringsplass med høy ytelse og lavere kostnader som brukes i animasjonsstudioer, sportsligaer og kringkasting.

I begynnelsen av IBC kunngjorde Cloudian at HyperStore-objektlagringsprogramvaren nå er flashoptimalisert, slik at bedrifter kan dekke behovene til ytelsesintensive arbeidsbelastninger mens de distribuerer flash- og HDD-baserte noder med en adaptiv hybridarkitektur som gjør det mulig for kunder å redusere totalbeløpet koster 40% ved å lagre mindre brukte data til HDD-lagringen. HyperStore er tilgjengelig enten som en programvareløsning eller i et forhåndskonfigurert apparat, HyperStore Flash 1000-serien. HyperStore Flash 1000 tilbyr 77TB og 154TB kapasitet i en 1U form facto og er vist nedenfor.

I følge selskapet, “Cloudians nye flash-optimaliserte programvare leverer den nødvendige ytelsen samtidig som den gir alle fordelene med Cloudians enterprise-grade objektlagringsplattform, inkludert fullstendig S3-kompatibilitet, bransjeledende sikkerhet og avanserte administrasjonsfunksjoner som multi-tenancy og tjenestekvalitet. Flash-optimalisert HyperStore utnytter I / O-profilen med redusert latens for flashmedier på industristandard maskinvare, og leverer delvis objektlesninger og datatilgang med lav latens i stor skala. Cloudians plattform er sertifisert med ledende NVMe-leverandører som Intel og Kioxia og er Intel Optaneklar for enda større ytelse. ”

Open Drives kunngjorde tilgjengeligheten av programvareplattformen Atlas 2.1 som driver sine OpenDrives-lagringsløsninger. Den nye programvaren opererer på selskapets nylig utgitte Ultra Hardware-plattform, vist nedenfor, som nå inkluderer NVMe SSD-er i sitt Ultimate-produkt og balansert med HDD-er i Optimum-produktet. Disse er vist nedenfor, samt Momentum HDD array-produktet.

Atlas 2.1 har funksjoner som gjør det mulig for selskaper å massere ut og samtidig opprettholde ytelsen. Disse funksjonene inkluderer: lagringsklynging, distribuerte filsystemer, containerisering, betinget automatisering, sentralisert styring og synlighet, skylagringsstøtte og høy tilgjengelighet.

Storage Clustering tillater at individuelle oppskaleringsenheter, eller noder, blir samlet sammen og danner en klynge. Denne parallelle distribuerte arkitekturen muliggjør balansert arbeidsbelastning blant klyngenoder uten å ofre ytelsestreff som økt ventetid.

Containerization bringer funksjoner som beregning og selve applikasjonen nærmere hvor dataene ligger i lagring. OpenDrives nærmet seg containerisering fra lagringssynspunktet. Gjennom dette sier selskapet at OpenDrives er i stand til å oppnå enorme ytelsesgevinster ved å levere dataene til containeren på en intelligent og effektiv måte.

Betinget automatisering er en komplementær funksjon til containerisering, som muliggjør utløsende handlinger, for eksempel tidsbaserte eller filbaserte handlinger, for å lage automatiserte oppgaver som fyrer opp og fungerer uavhengig av andre oppgaver. Sentralisert styring og synlighet gjennom en enkelt glassrute gir operatører innsikt i effektivitet i lagringsinfrastruktur og hjelper deg med å bedre konfigurere innstillinger for å stille inn noder og lagringsklynger.

Støtte for skylagring gjør det mulig for brukere å sende og motta både lokale og skydata via S3-protokollen og dele S3-fjernmål via SMB (Service Message Blocks) lokalt. Høy tilgjengelighet styrer operasjonell kontinuitet slik at kunder kan konfigurere standby-noder som aktiveres når en primær enhet går ned.

Skyen og solid state-lagring endrer måten vi jobber med medieinnhold på. Men for fagpersoner som jobber hjemme eller i et lite anlegg, kan lokal lagring gi høyest ytelse. La oss se på nye og oppdaterte lokale lagringstilbud for M & E-applikasjoner.

Lokale arbeidsflytlagringsprodukter

Promise Technology introduserte sin PegasusPro, i 2020 IBC, et Thunderbolt 3 DAS og NAS-fusjonssystem som skal forbedre arbeidsflyteffektiviteten i samarbeid med digitale medier. Produktet gir rask dataoverføring fra DAS til 10GbE NAS og omvendt ved hjelp av selskapets FileBoost-teknologi. Selskapet sier at flere mennesker kan koble direkte til PegasusPro via Thunderbolt 3 og samtidig dele sitt arbeid med andre teambidragere over NAS. PegasusPro-produktlinjen er vist nedenfor.

Seagate tilbyr sine EXOS HDD JBOD-er i tillegg til Nytro All-flash-arrays.

One Stop Systems hadde en virtuell messetur på IBC i 2020. Selskapet sier at det, “designer og produserer spesialytede systemer med høy ytelse for media-, underholdnings- og visualiseringsindustrien, og bruker kraften fra PCI Express, de nyeste GPU-akseleratorene og NVMe-lagring for å kjøre krevende databehandlingsapplikasjoner, inkludert endelig rammegjengivelse, storstilt arrangement visualisering, sanntids utvidet virkelighet og AI forbedret video etterproduksjon. OSS-tilbud inkluderer bransjens første PCIe Gen 4-baserte gjengeakseleratorer og videoopptakere med dobbelt så stor båndbredde som eksisterende systemer og opptil 16 NVIDIA A100 GPUer i et enkelt system. OSS leverer AI på Fly ™ som bringer ytelsen til datasenteret til arbeidsflyter på stedet og i studio. ”

Synology kunngjorde sin DS1621xs + på IBC i 2020. Ifølge selskapet “deler DS1621xs + den kraftige Xeon-prosessoren som finnes i andre Synology-datasenterenheter. Over 3.1 GB / sek. lese og 1.8 GB / s seq. skriveytelse betyr at den kan takle større datasett og håndtere flere brukere, med ekstremt høye hastigheter. Det er også parret med ECC-minne for maksimal pålitelighet, og når det kombineres med Btrfs og andre omfattende alternativ for sikkerhetskopiering av data, kan brukerne være sikre på at dataene deres er sikre. " Produktet er vist nedenfor.

Seks interne 3.5 ”HDD-brønner muliggjør opptil 96 TB rå lagringskapasitet. Utvidelsesenheter tillater å øke dette til 16 bukter og 256 TB kapasitet. En ekstra 10 GbE NIC kan øke gjengivelsesprosjektene eller gi enda raskere overføringer for flere virtuelle maskiner. Produktet tilbyr en lokal NAS-tjeneste, samtidig som det tillates ekstern tilgang med en nettleser eller mobilapp.

Symply introduserte sitt oppgraderte SymplyWORKSPACE for 2020 virtuelle IBC, et StorNext6-drevet desktop flerbruker Thunderbolt 3 SAN-lagringssystem med innebygd aksel ai 2020 AI-basert mediaadministrasjon med lagringskapasitet fra 48 TB opp til 366 TB, vist nedenfor. Selskapet sier at denne enheten kan støtte opptil åtte samtidige brukere som samarbeider om 8K-jobber og støtter ekstern tilgang, slik at brukere kan få tilgang til fullmakter på systemet hjemmefra. Adv aced RAID-beskyttelse hjelper deg med å beskytte medieaktiva, og bruk av solid state-lagring bidrar til å forbedre den generelle systemytelsen. Akselen ai kjører i en virtuell Linux-maskin på WORKSPACE Xeon-prosessoren.

2020 Digital Storage in Media and Entertainment Report

De 2020 Digital Storage for Media and Entertainment Report, fra Coughlin Associates, gir 251 sider med grundig analyse av rollen som digital lagring i alle aspekter av profesjonelle medier og underholdning. Anslag er gitt til 2025 for etterspørsel etter digital lagring i innholdsfangst, etterproduksjon, innholdsdistribusjon og innholdsarkivering er gitt i 62 tabeller og 129 figurer.

Rapporten hadde nytte av innspill fra mange eksperter i bransjen, inkludert sluttbrukere og lagringsleverandører, som sammen med økonomisk analyse og bransjepublikasjoner og kunngjøringer ble brukt til å lage dataene inkludert i rapporten. Som et resultat av endringer i økonomien til lagringsenheter vil solid state-lagring med høyere ytelse spille en større rolle i fremtiden. Skyen og hybridlagringen, inkludert skyen, har fått en ny betydning for mange arbeidsflyter under Covid-19-pandemien. Når pandemien går over, vil bruk av skylagring fortsette å vokse i media- og underholdningsmarkedet fremover.

Du kan finne ut mer og bestille direkte på tomcoughlin.com/product/digital-storage-for-media-and-entertainment-report/

[1] 2020 Digital lagring i media og underholdning, Coughlin Associates, tomcoughlin.com/product/digital-storage-for-media-and-entertainment-report/

Om forfatteren

Tom Coughlin, president, Coughlin Associates er en digital lagringsanalytiker og forretnings- og teknologikonsulent. Han har over 39 år i datalagringsbransjen med ingeniør- og lederstillinger i flere selskaper. Coughlin Associates konsulterer, publiserer bøker og markeds- og teknologirapporter og legger på digitale lagringsorienterte arrangementer. Han er en vanlig lagrings- og minnebidragsyter for forbes.com og M&E organisasjons nettsteder. Han er en IEEE-stipendiat, tidligere president i IEEE-USA og er aktiv med SNIA og SMPTE. For mer informasjon om Tom Coughlin og hans publikasjoner og aktiviteter www.tomcoughlin.com.

 


AlertMe
IKKE følg denne linken, eller du vil bli utestengt fra nettstedet!