Yayin Taron Data + AI An bayyanar da tubalin bayanai ta hanyar talla, wanda zai 'yantar da dukkan tsarin ajiyar tafkin Delta bude tushen karkashin kulawar Linux Foundation.
Yana da kyau a faɗi hakan Delta Lake ya kasance aikin Linux Foundation tun Oktoba 2019 kuma shi ne buɗaɗɗen ajiya mai buɗewa wanda ke kawo aminci da aiki ga tafkunan bayanai ta hanyar "ginin tafkin", mafi kyawun ɗakunan ajiyar bayanai da tafkunan bayanai a ƙarƙashin rufin daya.
A cikin shekaru uku da suka gabata, Lakehouses ya zama mafita mai ban sha'awa ga injiniyoyin bayanai, manazarta, da masana kimiyyar bayanai waɗanda ke son sassauci don gudanar da ayyuka daban-daban akan bayanai iri ɗaya tare da ɗan ƙaramin rikitarwa kuma babu kwafi, daga nazari daga bayanai zuwa haɓaka injin koyo. . Kogin Delta shine tsarin gidan tafkin da aka fi amfani dashi a duniya kuma a halin yanzu yana ganin sama da abubuwan zazzagewa miliyan 7 a kowane wata (da girma).
"Tun daga farko, Databrick ya himmatu don buɗe ka'idoji da kuma buɗe tushen al'umma. Mun ƙirƙira, ba da gudummawa, haɓaka haɓaka kuma mun ba da gudummawar wasu sabbin abubuwa masu tasiri a fasahar buɗaɗɗen tushen zamani,” in ji Ali Ghods.
Hakan na nufin kenan Ba za a ƙara samun bambance-bambancen aiki tsakanin alamar Databrick na tafkin Delta da sigar buɗaɗɗen tushe ba. Kamfanin ya ce hakazalika zai sake fitar da abubuwan da ya inganta na kwanan nan zuwa dandamalin ayyukan koyo na injin MLflow da tsarin nazarin tushen Apache Spark. Databricks ya kuma fitar da sabbin abubuwa da yawa zuwa babban tafkin bayanan Lakehouse.
“Kafin tafkin Delta, fasahohi kamar Spark suna sarrafa bayanai masu yawa; Tafkin Delta yana ba ku damar aiwatar da ƙananan ɓangarorin tare da duk canje-canje da aka adana a tarihi don ku iya komawa da gaba,” in ji Ali Ghodsi Co-kafa Databricks kuma Shugaba na Databricks. "Wannan yana da mahimmanci ga hanyoyin tantancewa da bin ka'ida don ku iya komawa ku nemo shawarar da kuka yanke shekara guda da ta gabata."
Bugu da kari, ya kamata a lura da cewa sabon sigar 2.0 na tafkin Delta yana da mafi kyawun aikin tambaya da tushe bisa buɗaɗɗen ka'idoji. Dan takarar da aka saki yanzu yana nan kuma ana sa ran zai shiga cikin sakin gabaɗaya daga baya a wannan shekara.
Databricks ya ce sabuntawa yana nuna gudunmawar sama da masu haɓakawa 6400 kuma ya lura cewa jimlar ayyukan sun karu da kashi 95% tare da matsakaicin adadin layukan layukan kowane aikatawa ya karu da 900% sama da shekarar da ta gabata.
Kamfanin Hakanan yana sanar da sigar 2.0 na MLflow, dandali don gudanar da ayyukan koyon inji. Kaddamarwa ya haɗa da bututun mai, sabon fasali don haɓakawa da sauƙaƙe ƙaddamar da ƙirar ƙirar na'ura. Bututun bututu suna ba wa masana kimiyyar bayanai da ƙayyadaddun ƙima, shirye-shiryen samarwa bisa nau'in ƙirar da suke ginawa don ba da damar haɓaka ƙirar ƙira cikin sauri da aminci ba tare da buƙatar sa baki daga injiniyoyin samarwa ba.
Masu amfani za su iya ayyana abubuwan bututun a cikin fayil ɗin daidaitawa kuma MLflow Pipelines suna sarrafa aiwatar da aiwatarwa ta atomatik, in ji kamfanin. Databricks ya kuma ƙara tashoshi samfurin maras sabar don tallafawa samfurin samarwa kai tsaye, da kuma ginanniyar dashboards na sa ido na ƙirar don taimakawa ƙungiyoyi suyi nazarin aikin ƙirar na gaske.
“Aikin tafkin Delta yana fuskantar ayyuka masu ban mamaki da haɓaka haɓaka wanda ke nuna ƙungiyar masu haɓakawa suna son zama wani ɓangare na aikin. Ƙarfin masu ba da gudummawa ya karu da 60% a cikin shekarar da ta gabata kuma girma a cikin jimlar ayyukan ya karu da 95% kuma matsakaicin layi na lambar kowane sadaukar ya karu da 900%. Muna ganin wannan haɓakar haɓaka daga ƙungiyoyi masu ba da gudummawa kamar Uber Technologies, Walmart, da CloudBees, Inc., da sauransu." - Babban Darakta na Gidauniyar Linux, Jim Zemlin.
Idan kun kasance sha'awar sanin ƙarin game da shi, za ka iya duba cikakken bayani A cikin mahaɗin mai zuwa.