Büyük Veri, Özgür Yazılım ve Açık Kaynak: Mevcut Uygulamalar

Büyük Veri, büyük hacimli verilerin yönetimi ile ilgili teknolojik bir kavramdır.yapılandırılmış ve yapılandırılmamış, şu anda büyük iş dünyası, teknolojik, bilimsel ve hatta devlet sektörleri tarafından idare edilmektedir.

Hakkında konuşurken Büyük Veri, gerçekten önemli olan veri miktarı değil, kuruluşların verilerle ne yaptığıdır. Big Data, ilişkili teknolojisi, daha iyi karar alma, hareket ve stratejilere yol açan fikirleri elde etmek için onları analiz edebilir. Ve bu açıdan, Özgür Yazılım (SL) ve Açık Kaynak (CA) bu teknolojiye çok katkıda bulundu, çünkü birçok gelişmiş uygulama bu geliştirme formatında gerçekleştirilmiştir.

Büyük Veri ve Özgür Yazılım

Teknikte tecrübeli kişiler için, halihazırda iyi bilinmektedir. Özgür Yazılım, geliştirme modeli ve felsefesi, başta yazılım ürünleri olmak üzere, sırasıyla kullanılabilen, değiştirilebilen ve özgürce dağıtılabilen teknolojiler yaratmaya dayanır. Ve bu Açık Kaynak, özgür yazılımın geliştirilmesinde önemli bir unsurdur, çünkü bu gelişme dinamiğinin pratik avantajlarına, ürün özgürlüğü ve vatandaş etiğinden daha fazla odaklanmaktadır.

Bu nedenle SL / CA, Büyük Veriyi gerçekleştirme araçlarıyla katkıda bulunurBüyük Veri, bunları yalnızca teknolojik gelişmenin hızlandırılmış genişlemesi yararına değil, aynı zamanda Büyük Verinin beraberinde getirdiği bilgiye erişim özgürlüğü için dolaylı olarak tamamlar.

Büyük veri nedir?

Concepto

Yazılım ve teknolojik gelişimin en iyilerinden biri için, IBM, Büyük Veri bir:

«... çok uzun sürecek ve yüklemesi çok pahalı olacak büyük miktarda veriyi (yapılandırılmış, yapılandırılmamış ve yarı yapılandırılmış) tanımlamak için kullanılan, anlama ve karar verme için yeni bir yaklaşımın kapılarını açan teknoloji analiz için ilişkisel bir veritabanı.

Gol

Büyük Veri, teknolojisi, mümkün olan tüm veri analizi spektrumunu kapsamak amacıyla doğmuştur.yani, mevcut ve farklı teknolojilerle hem mevcut hem de çözümlenmiş olanları ve ayrıca mevcut teknolojiler tarafından çözülmeyenleri kapsamak büyük hacimli verilerin depolanması ve yönetimi çok özel özelliklere sahip.

Veri

Teklif Verileri, genellikle aşağıdaki özelliklerle tanımlanan veri hacimlerini işler:

• hacim: Birden çok kaynaktan alınan verilerin boyutu.
• hız: Birden çok kaynaktan gelen verilerin ulaştığı ve yönetildiği hız.
• Çeşitlilik: Birden çok kaynaktan analiz edilen verilerin formatı.

Demek istediğim Genellikle Yapılandırılmış, Yarı Yapılandırılmış ve Yapılandırılmamış verilerden oluşan veri hacimlerive diğerlerinin yanı sıra Tera, Peta veya Exa gibi genellikle yüksek miktarlı öneklerle tanımlanan büyük miktarlarda kullanılmalıdır.

Ve İnternet gibi her türlü kaynaktan (Sosyal ağlar, Dijital Medya, Web Siteleri ve Veritabanları), donanım (Cep telefonları, Multimedya oynatıcılar, Konumlandırma sistemleri, Sivil ve endüstriyel dijital sensörler, diğerleri arasında) ve kuruluşlar (Özel ve Kamu, Ticari, Hükümet ve Topluluk).

önem

Büyük Veriyi Organizasyonlar için bu kadar kullanışlı bir teknoloji yapan nedir? (Özel ve Kamu, Ticari, Devlet ve Topluluk), değerli bilgiler sağlamasıdır genellikle sorulmamış sorulara doğru ve güvenilir bir cevap olarak hizmet eder belirli durumlar veya sorunlar için. Yani, faydası genellikle toplanan ve yönetilen aynı bilgilerden kaynaklanan yönlerde görülür.

Büyük hacimli bilgilerin işlenmesi, işlenen verilerin en uygun şekilde şekillendirilmesini veya test edilmesini kolaylaştırır. veya yöneticisi tarafından uygun görülenleri belirtir. Bu, Büyük Veriyi kullanan kuruluşların sorunları daha anlaşılır bir şekilde tanımlamasına olanak tanır.

Büyük hacimli verilerin toplanması ve ardından içlerindeki eğilimleri aramak için analizi, Kuruluşların daha etkili ve verimli olmasını sağlaronların üzerinden çok daha hızlı, sorunsuz ve zamanında hareket ederek. Ek olarak, sorunlu alanları, sorunlar onları ele geçirmeden ortadan kaldırmalarına olanak vererek, onların yararlarını, itibarını veya desteğini kaybetmelerine neden olur.

Avantaj

Büyük Veri, Kuruluşların verilerini çok daha iyi yönetmelerine yardımcı olur; bu, üyeleri (müşteriler veya vatandaşlar) için yeni olumlu veya üretken fırsatların belirlenmesiyle sonuçlanır. Ve bu da, daha akıllı ve daha verimli eylemlere, saat / işçilik ve paradan tasarruf sağlar ve bu da çoğu kez dahil olan herkes için mutluluğa dönüşür. Büyük Veri kullanıldığında, genellikle aşağıdaki şekillerde gerçekleştirilen faaliyetlere değer katılır:

• Maliyet azaltma: Büyük hacimli verilerin depolanması ve yönetiminde.
• Zaman azaltma: Karar vermede daha fazla verimlilik ve etkinlik.
• Yeni ürünler ve hizmetler: Kullanıcıların (müşteriler ve / veya vatandaşlar) ihtiyaçlarını ve sorunlarını ölçme ve tahmin etme yeteneği ile memnuniyetleri artar.

faydaları

İyi kullanılan Büyük Veri, genellikle hataların, sorunların ve kusurların temel nedenlerini neredeyse gerçek zamanlı olarak belirleyebilir. Ancak, dikkate alınmalıdır ki Büyük Veri teknolojisi tek başına her derde deva değil. Öyleyse, başka bir harika teknolojiden alıntı yaparak Oracle, şu eklenebilir:

"Büyük verinin değerini belirlemek sadece onu analiz etmek anlamına gelmiyor (ki bu zaten başlı başına bir avantajdır). Analistlerin, iş kullanıcılarının ve yöneticilerin doğru soruları sormasını, kalıpları belirlemesini, bilinçli kararlar vermesini ve davranışları tahmin etmesini gerektiren eksiksiz bir keşif sürecidir.

Büyük Veri için SL / CA Uygulamaları

Araştırma, test ve uygulama için bahsetmeye değer Özgür Yazılım ve Açık Kaynak uygulamaları arasında şunlar yer alır:

İlişkili

• Apache Hadoop'u: Hadoop Dağıtılmış Dosya Sistemi (HDFS), Hadoop MapReduce ve Hadoop Common'dan oluşan açık kaynaklı platform.
• Avro: Serileştirme hizmetleri sağlayan Apache projesi.
• Kassandra: Bir depolama modeline göre dağıtılmış ilişkisel olmayan veritabanı , Java'da geliştirilmiştir.
• Çukva: Olay günlüklerinin büyük ölçekli toplanması ve analizi için tasarlanmış yazılım.
• Kanal: Ana görevi verileri bir kaynaktan başka bir konuma yönlendirmek olan yazılım.
• HBaz: HDFS üzerinde çalışan sütunlu veritabanı (sütun tabanlı veritabanı).
• Kovan: Dağıtılmış bir ortamda depolanan büyük hacimli verilerin yönetimini kolaylaştıran "Veri Ambarı" altyapısı.
• Jaql: Büyük hacimli bilgileri işlemek için tasarlanmış JSON formatında verilerin kullanılmasına izin veren işlevsel ve bildirimsel dil.
• Lusen: Metinde indeksleme ve arama için kitaplıklar sağlayan yazılım.
• oozie: İş akışlarını ve süreçlerin her biri arasındaki koordinasyonu basitleştiren açık kaynaklı proje.
• Domuz: Hadoop kullanıcılarının tüm veri kümelerini analiz etmeye daha fazla odaklanmasına ve MapReduce programları oluşturmak için daha az zaman harcamasına olanak tanıyan yazılım.
• Hayvan bakıcısı: Bir kümedeki işlemlerin serileştirilmesini veya senkronize edilmesini sağlamak için uygulamalar tarafından kullanılabilen merkezi altyapı ve hizmetler.

bağımsız

Aynı derecede iyi bilinen ancak açık kaynak platformu Hadoop ile ilgili olmayan diğerleri:

• Elastik arama: Tam metin tabanlı arama ve analiz motoru.
• MongoDB: Belge veri modeline dayalı NoSQL veritabanı.
• Kassandra: NoSQL veritabanı yönetimi için tasarlanmış Apache açık kaynak projesi.
• Kanepe DB: Kolay erişilebilirlik ve çeşitli web uyumluluğu için ortak standartlara dayalı açık kaynaklı NoSQL veritabanı.
• Güneş: Lucene projesi Java kitaplığına dayalı açık kaynak arama motoru.
  Diğer RDBMS araçları: MySQL Cluster ve VoltDB.

Sonuç

Şimdiki (ve hemen sonraki) zamanımız, bireyselden çok bir bütün olarak söyleyecek çok şeyi olan yüksek ve büyüyen bir veri yığınına dalmış veya boğulmuş durumda. Bu nedenle, Büyük Veri teknolojisinin günümüzde ve yakın gelecekte kullanılması, toplumun, tüm insanlığın, kendilerini keşfetmeleri uzun yıllar alabilecek sonsuz sayıda şeyi (olaylar veya icatlar) keşfetmesine yardımcı olacaktır. bunun.

olarak Büyük Veri ve araçları yeterli analiz hızı sağlar hızlı bir şekilde elde edilen bir sonucu analiz edin ve ulaşmaya çalıştığınız gerçek veya en yakın değeri bulmak için kısa sürede gerektiği kadar yeniden çalışın. Büyük Veri konusunu ilginç bulduysanız, bu Raporu okuyarak konuyu biraz daha genişletebilirsiniz. BBVA.