Databricks ayaa siidaayay koodka Delta Lake iyo MLflow

Inta lagu jiro Shirka Xogta + AI Xogta la soo bandhigay iyada oo loo marayo xayeysiin, kaas oo xorayn doona dhammaan qaabka kaydinta harada Delta il furan oo ay maamusho Linux Foundation.

Waxaa xusid mudan taas Delta Lake waxay ahayd mashruuc Linux Foundation ah ilaa Oktoobar 2019 waana lakabka kaydinta furan ee keena kalsoonida iyo waxqabadka harooyinka xogta iyada oo loo marayo "qaab-dhismeedka harooyinka", ugu fiican ee kaydinta xogta iyo harooyinka xogta ee hal saqaf ah.

Saddexdii sano ee la soo dhaafay, Lakehouses waxay noqotay xal soo jiidasho leh oo loogu talagalay injineerada xogta, falanqeeyayaasha, iyo saynisyahannada xogta kuwaas oo raba dabacsanaan si ay ugu shaqeeyaan culeysyo shaqo oo kala duwan isla xog isku mid ah oo leh kakanaanta ugu yar oo aan lahayn nuqul, laga soo bilaabo falanqaynta xogta ilaa horumarinta mishiinnada waxbarashada. . Harada Delta waa qaabka loogu isticmaalka badan yahay guriga harada adduunka oo hadda aragta in ka badan 7 milyan oo la soo dejiyo bishii (oo sii kordhaya).

"Laga bilaabo bilowgii, Databricks waxaa ka go'an in ay furto heerarka furan iyo bulshada isha furan. Waxaan abuurnay, gacan ka geysannay, kobcinnay, waxaana ku deeqnay qaar ka mid ah hal-abuurka ugu saamaynta badan ee tignoolajiyada casriga ah ee il furan,” ayuu yidhi Cali Ghods.

Taasi waxay ka dhigan tahay Ma jiri doono kala duwanaansho shaqayneed oo u dhexeeya astaanta Delta Lake ee Databricks iyo nooca isha furan. Shirkaddu waxay sheegtay inay si la mid ah u sii deyn doonto horumarinteedii ugu dambeysay ee mashiinka MLflow mashiinka wax lagu barto iyo qaab-dhismeedka falanqaynta Apache Spark ee furan. Databricks waxay sidoo kale soo bandhigtay dhowr astaamood oo cusub harada xogta Lakehouse.

"Kahor harada Delta, tignoolajiyada sida Spark waxay farsameyn jireen xog aad u badan; Delta Lake waxay kuu ogolaaneysaa inaad ka shaqeyso deltas yar oo leh dhammaan isbeddelada lagu keydiyo taariikhda si aad dib ugu noqon karto," ayuu yiri Ali Ghodsi Co-founder of Databricks iyo Maamulaha Databricks. "Tani waxay muhiim u tahay dariiqyada xisaabinta iyo u hoggaansanaanta si aad dib ugu noqoto oo aad u hesho go'aamadii aad samaysay sanad ka hor."

Intaa waxaa dheer, waa in la ogaadaa in Nooca cusub ee 2.0 ee Delta Lake wuxuu leeyahay waxqabad su'aaleed oo wanaagsan iyo aasaas ku salaysan heerarka furan. Musharaxa sii daynta ayaa hadda diyaar ah waxaana la filayaa in uu galo siidaynta guud dabayaaqada sanadkan.

Databricks ayaa sheegay in Cusboonaysiinta ayaa ka tarjumaysa wax ku biirinta in ka badan 6400 horumariye waxaana uu xusay in wadarta ballanqaadyadu ay kordheen 95% iyada oo celceliska tirada xariiqyada koodka ballan-qaadku ay kordhay 900% sannadkii la soo dhaafay.

Shirkadda sidoo kale wuxuu ku dhawaaqay nooca 2.0 ee MLflow, madal lagu maamulo mashaariicda mashiinka lagu barto. Daahfurka waxaa ka mid ah dhuumaha, sifo cusub oo lagu dedejinayo oo loo fududeeyo habka barashada mashiinka. Dhuumaha dhuumaha ayaa siiya saynisyahano xogta leh qaabab diyaarsan oo wax soo saar leh oo ku saleysan nooca moodelka ay dhisayaan si ay awood ugu yeeshaan horumarinta moodeelka si dhakhso leh oo la isku halleyn karo iyada oo aan u baahnayn faragelinta injineerada wax soo saarka.

Isticmaalayaashu waxay qeexi karaan walxaha dhuumaha ee faylka qaabeynta iyo MLflow Pipelines waxay si toos ah u maareeyaan fulinta, shirkaddu waxay tiri. Databricks ayaa sidoo kale ku daray terminaalka moodeelka server-la'aanta ah si ay si toos ah u taageeraan qaabka wax soo saarka martigelinta, iyo sidoo kale qaabka ku dhex dhisan ee la socodka dashboards si ay uga caawiyaan kooxaha inay falanqeeyaan waxqabadka moodeelka dhabta ah.

"Mashruuca Delta Lake waxa uu la kulmaa hawlo cajiib ah iyo isbeddello koritaan oo muujinaya in bulshada horumarisa ay doonayso in ay qayb ka noqoto mashruuca. Awooda wax ku biirinta ayaa korodhay 60% sanadkii la soo dhaafay waxaana kobaca wadarta wax qabadku uu kordhay 95% celceliska xariiqa koodka ballankiiba waxa uu kordhay 900%. Waxaan aragnaa xawaarahan kor u kaca ee ururada wax ku biiriya sida Uber Technologies, Walmart, iyo CloudBees, Inc., iyo kuwo kale." - Agaasimaha fulinta ee aasaaska Linux, Jim Zemlin.

Naps xiisaynaya in aad wax badan ka ogaato ku saabsan, waxaad ka eegi kartaa faahfaahinta Xiriirka soo socda.


Ka tag faalladaada

cinwaanka email aan la daabacin doonaa. Beeraha loo baahan yahay waxaa lagu calaamadeeyay la *

*

*

  1. Masuul ka ah xogta: Miguel Ángel Gatón
  2. Ujeedada xogta: Xakamaynta SPAM, maaraynta faallooyinka.
  3. Sharci: Oggolaanshahaaga
  4. Isgaarsiinta xogta: Xogta looma gudbin doono dhinacyada saddexaad marka laga reebo waajibaadka sharciga ah.
  5. Kaydinta xogta: Macluumaadka ay martigelisay Shabakadaha Occentus (EU)
  6. Xuquuqda: Waqti kasta oo aad xadidi karto, soo ceshan karto oo tirtiri karto macluumaadkaaga.