Том өгөгдөл, үнэгүй програм хангамж ба нээлттэй эх үүсвэр: боломжтой програмууд

Том өгөгдөл, үнэгүй програм хангамж ба нээлттэй эх үүсвэр: боломжтой програмууд

Том өгөгдөл, үнэгүй програм хангамж ба нээлттэй эх үүсвэр: боломжтой програмууд

Big Data бол их хэмжээний мэдээллийн менежменттэй холбоотой технологийн ойлголт юм, бүтэц, зохион байгуулалтгүй, үүнийг одоогоор томоохон бизнес, технологи, шинжлэх ухаан, тэр ч байтугай засгийн газрын салбарууд хариуцаж ажилладаг.

Хэдийгээр ярихдаа Big Data гэдэг нь үнэндээ өгөгдлийн хэмжээ биш, харин байгууллагууд тухайн өгөгдөлтэй юу хийх нь чухал байдаг. Үүнтэй холбоотой технологи болох Big Data нь тэдгээрийг шинжлэх замаар шийдвэр гаргах, хөдөлгөөн, стратегиа сайжруулахад чиглэсэн санаануудыг олж авах боломжтой байдаг. Энэ тал дээр Чөлөөт програм хангамж (SL) болон нээлттэй эх сурвалж (CA) энэ технологид маш их хувь нэмэр оруулсан, олон боловсруулсан програмууд энэхүү хөгжлийн форматад хэрэгжиж эхэлсэн тул.

Том өгөгдөл ба үнэгүй програм хангамж: Оршил

Том өгөгдөл ба үнэгүй програм хангамж

Урлагт чадварлаг хүмүүсийн хувьд үүнийг аль хэдийн мэддэг болсон Чөлөөт програм хангамж, түүний хөгжлийн загвар, түүний философи нь технологи, голчлон програм хангамжийн бүтээгдэхүүнийг бий болгоход суурилдаг бөгөөд үүнийг эргээд ашиглах, өөрчлөх, түгээх боломжтой. Бүтээгдэхүүний эрх чөлөө, ёс зүй гэхээсээ илүүтэй энэхүү хөгжлийн динамикийн практик давуу тал дээр анхаарлаа төвлөрүүлдэг тул нээлттэй эх сурвалж нь үнэгүй програм хангамжийн хөгжлийн чухал элемент юм. иргэд.

Тиймээс, SL / CA нь Big Data-г хэрэгжүүлэх арга хэрэгслээр хувь нэмэр оруулдаг, Big Data нь технологийн дамжилтыг түргэтгэх ашиг тустай төдийгүй Big Data дагалдаж ирдэг мэдээлэлд нэвтрэх эрх чөлөөний үүднээс эдгээрийг шууд бусаар нөхдөг.

Big Data ба үнэгүй програм хангамж: Big Data гэж юу вэ?

Том өгөгдөл гэж юу вэ?

concepto

Програм хангамж, технологийн хөгжлийн нэг агуу зүйлд IBM, Big Data нь:

«... ойлголт, шийдвэр гаргах шинэ хандлагын үүд хаалгыг нээсэн технологи бөгөөд энэ нь хэт их цаг хугацаа шаардсан, ачаалахад маш их өртөгтэй асар их хэмжээний өгөгдлийг (бүтэцлэгдсэн, бүтэцгүй, хагас бүтэцтэй) дүрслэхэд ашиглагддаг. дүн шинжилгээ хийх харилцааны мэдээллийн сан.

Зорилго

Big Data, түүний технологи нь өгөгдлийн анализ хийх боломжтой бүх спектрийг хамрах зорилготой төрсөн, өөрөөр хэлбэл одоо байгаа болон өөр өөр технологиудаар одоо байгаа, шийдэгдсэн, мөн одоо байгаа технологиудаар шийдэгдээгүй байгаа зүйлийг хамарна. их хэмжээний өгөгдлийг хадгалах, удирдах маш өвөрмөц шинж чанартай байдаг.

Өгөгдөл

Тендерийн өгөгдөл нь ихэвчлэн дараах шинж чанаруудаар тодорхойлогдох өгөгдлийн хэмжээг зохицуулдаг.

  • Эзлэхүүн: Олон эх сурвалжаас авсан мэдээллийн хэмжээ.
  • Хурд: Олон эх сурвалжаас өгөгдөл ирэх, удирдах хурд.
  • Янз бүрийн: Олон эх сурвалжаас дүн шинжилгээ хийсэн өгөгдлийн формат.

Би хэлж байна ихэвчлэн бүтэцлэгдсэн, хагас бүтэцтэй, бүтэцгүй өгөгдлүүдээс бүрдэх өгөгдлийн хэмжээТэдгээрийг ихэвчлэн өндөр хэмжээтэй угтвараар дүрсэлсэн асар их хэмжээгээр зохицуулдаг, жишээлбэл: Тера, Пета эсвэл Экса, бусад.

Интернет гэх мэт бүх төрлийн эх сурвалжаас авдаг (Нийгмийн сүлжээ, Дижитал медиа, вэбсайт, мэдээллийн сан), Нүүр хуудас (Гар утас, Мультимедиа тоглуулагч, Байршлын систем, Иргэний болон үйлдвэрлэлийн тоон мэдрэгч гэх мэт) ба Байгууллагууд (Хувийн ба нийтийн, арилжааны, засгийн газар ба олон нийтийн).

Том өгөгдөл ба үнэгүй програм хангамж: ойлголт, зорилго, өгөгдөл, ач холбогдол, давуу ба ашиг тус

Ач холбогдол

Big Data нь байгууллагуудад ийм хэрэгтэй технологийг бий болгодог зүйл юу вэ? (Хувийн ба нийтийн, арилжааны, засгийн газар ба олон нийтийн), нь үнэ цэнэтэй мэдээлэл өгдөг явдал юм гэж асууж амжаагүй асуултуудад үнэн зөв, найдвартай хариулт өгдөг тодорхой нөхцөл байдал эсвэл асуудлын хувьд. Өөрөөр хэлбэл, түүний ашиг тус нь ихэвчлэн цуглуулсан, удирддаг ижил мэдээллээс үүдэлтэй тал дээр ихэвчлэн харагддаг.

Их хэмжээний мэдээллийг боловсруулах нь боловсруулсан өгөгдлийг хамгийн тохиромжтой хэлбэрээр хэлбэржүүлэх эсвэл туршихад хялбар болгодог. эсвэл администратор нь үүнийг зохистой гэж үздэг. Энэ нь Big Data ашигладаг байгууллагуудад асуудлыг илүү ойлгомжтой байдлаар тодорхойлох боломжийг олгодог.

Их хэмжээний өгөгдлийг цуглуулах, тэдгээрийн чиг хандлагыг хайх зорилгоор дараагийн дүн шинжилгээ хийх нь Байгууллагуудыг илүү үр дүнтэй, үр дүнтэй ажиллах боломжийг олгодог, тэдгээрийн дээгүүр илүү хурдан, жигд, цаг хугацаанд нь шилжих замаар. Нэмж дурдахад энэ нь тэдэнд бэрхшээл тулгарахаас өмнө бэрхшээлтэй газруудыг арилгах боломжийг олгож, ашиг тус, нэр хүнд, дэмжлэгийг алдахад хүргэдэг.

Давуу талууд

Big Data нь байгууллагуудад өгөгдлөө илүү сайн удирдахад тусалдаг бөгөөд ингэснээр гишүүд (үйлчлүүлэгчид эсвэл иргэд) -ийн хувьд шинэ эерэг эсвэл үр бүтээлтэй боломжууд гарч ирнэ. Энэ нь эргээд илүү ухаалаг, үр дүнтэй арга хэмжээ авахад цаг хугацаа, хөдөлмөр, мөнгө хэмнэх боломжийг олгодог бөгөөд энэ нь ихэвчлэн оролцсон бүх хүмүүсийн аз жаргал болж хувирдаг. Big Data ашиглах үед дараахь байдлаар хийгдэж буй үйл ажиллагаанд үнэ цэнэ нэмэгддэг.

  • Зардлыг бууруулах: Их хэмжээний өгөгдлийг хадгалах, удирдахад.
  • Хугацааг багасгах: Шийдвэр гаргахад илүү үр дүнтэй, үр дүнтэй байдаг.
  • Шинэ бүтээгдэхүүн, үйлчилгээ: Хэрэглэгчид (үйлчлүүлэгчид ба / эсвэл иргэд) -ийн хэрэгцээ, бэрхшээлийг хэмжих, урьдчилан харах чадвартай болсноор тэдний сэтгэл ханамж нэмэгддэг.

Ашиг тус

Сайн ашигласан Big Data нь ихэвчлэн бодит цаг хугацаанд алдаа, асуудал, согогийн үндсэн шалтгааныг тодорхойлох чадвартай байдаг. Гэсэн хэдий ч үүнийг анхаарч үзэх хэрэгтэй Big Data технологи нь өөрөө өөрийгөө эмчлэх хэрэгсэл биш юм. Гэх мэт өөр нэг агуу технологийг дурдаж болно Oracle, үүнийг нэмж болно:

«Том өгөгдлийн үнэ цэнийг тодорхойлох нь зөвхөн түүнд дүн шинжилгээ хийх гэсэн үг биш (энэ нь өөрөө аль хэдийн давуу тал болсон). Энэ бол шинжээч, бизнесийн хэрэглэгчид, удирдлагуудаас зөв асуулт асууж, хэв маягийг тодорхойлж, шийдвэртэй шийдвэр гаргах, зан үйлийг урьдчилан таамаглахыг шаарддаг бүхэл бүтэн нээлтийн үйл явц юм.

Том өгөгдөл ба үнэгүй програм хангамж: SL / CA програмууд

Big Data-д зориулсан SL / CA програмууд

Судалгааны ажил, туршилт, хэрэгжилтийн талаар дурдах нь зүйтэй Чөлөөт Програм хангамж ба Нээлттэй Эх үүсвэрийн програмууд нь:

Холбоотой

  • Apache Hadoop: Hadoop Distributed File System (HDFS), Hadoop MapReduce, Hadoop Common-ээс бүрдсэн нээлттэй эхийн платформ.
  • Авро: Сериалжуулалтын үйлчилгээ үзүүлдэг Apache төсөл.
  • Кассандра: -Ийн хадгалалтын загварт суурилсан харилцан хамааралгүй мэдээллийн санг тараасан , Java дээр боловсруулсан.
  • Чуква: Үйл явдлын бүртгэлийг их хэмжээгээр цуглуулах, дүн шинжилгээ хийхэд зориулагдсан програм хангамж.
  • Утаа: Гол үүрэг нь өгөгдлийг нэг эх үүсвэрээс өөр байршил руу чиглүүлэх явдал юм.
  • HBase: HDFS дээр ажилладаг баганат өгөгдлийн сан (баганад чиглэсэн мэдээллийн сан).
  • Зөгийн үүр: Тархсан орчинд хадгалагддаг их хэмжээний өгөгдлийг удирдах ажлыг хөнгөвчлөх "Мэдээллийн агуулах" дэд бүтэц.
  • Жакл: Олон тооны мэдээллийг боловсруулахад зориулагдсан JSON форматтай өгөгдлийг ашиглах боломжийг олгодог функциональ ба тунхаглагч хэл.
  • Люцен: Текстийг индексжүүлэх, хайх зориулалттай номын сангуудаар хангадаг програм хангамж.
  • Оози: Ажлын явц, үйл явц бүрийн хоорондын зохицуулалтыг хялбарчлах нээлттэй эхийн төсөл.
  • Гахай: Hadoop-ийн хэрэглэгчдэд бүх өгөгдлийн багцыг шинжлэхэд илүү их анхаарч, MapReduce програмуудыг бүтээхэд бага цаг зарцуулах боломжийг олгодог програм хангамж.
  • Амьтны хүрээлэн хамгаалагч: Аппликейшн ашиглан кластер дээрх процессыг цуврал эсвэл синхрончлолоор хангахад ашиглаж болох төвлөрсөн дэд бүтэц, үйлчилгээ.

Хараат бус

Бусад хүмүүс сайн мэддэг боловч Hadoop нээлттэй эхийн платформтой холбоогүй бусад нь:

  • Elasticsearch: Бүрэн текст дээр суурилсан хайлт, дүн шинжилгээ хийх систем.
  • MongoDB: Баримтын мэдээллийн загварт суурилсан NoSQL мэдээллийн сан.
  • Кассандра: Apache нээлттэй эхийн төсөл нь NoSQL мэдээллийн баазын удирдлагад зориулагдсан болно.
  • CouchDB: Нийтлэг стандартад суурилсан нээлттэй эхийн NoSQL мэдээллийн сан, олон талт байдалтай вэб нийцтэй байдал.
  • Солр: Lucene төслийн Java номын санд суурилсан нээлттэй эхийн хайлтын систем.
    RDBMS-ийн бусад хэрэгслүүд: MySQL кластер ба VoltDB.

Том өгөгдөл ба үнэгүй програм хангамж: Дүгнэлт

Дүгнэлт

Бидний өнөөгийн (мөн шууд дараагийн) цаг хугацаа нь тус тусдаа гэхээсээ илүү бүхэлдээ хэлэх зүйл ихтэй, өндөр, өсөн нэмэгдэж буй өгөгдөлд автдаг. Тиймээс Big Data технологийг өнөө үед болон ойрын ирээдүйд ашиглах нь нийгэм, бүх хүн төрөлхтөн өөрсдийгөө нээхэд олон жил шаардагдах зүйл (үйл явдал эсвэл шинэ бүтээл) -ийн хязгааргүйг нээхэд туслах болно. , үүнийг ашиглахгүйгээр.

Учир нь Big Data ба түүний хэрэгслүүд шинжилгээний хангалттай хурдыг өгдөг олж авсан үр дүндээ хурдан дүн шинжилгээ хийж, богино хугацаанд шаардлагатай бол олон удаа дахин боловсруулж, хүрэх гэж байгаа үнэн эсвэл хамгийн ойрын үнэ цэнийг олох. Хэрэв танд Big Data сэдэв сонирхолтой санагдсан бол энэ Report дээр уншаад сэдвээ арай илүү өргөжүүлж болно BBVA.


Нийтлэлийн агуулга нь бидний зарчмуудыг баримталдаг редакцийн ёс зүй. Алдааны талаар мэдээлэхийн тулд товшино уу энд байна.

Сэтгэгдэл бичих эхний хүн бай

Сэтгэгдэлээ үлдээгээрэй

Таны и-мэйл хаяг хэвлэгдсэн байх болно. Шаардлагатай талбарууд нь тэмдэглэгдсэн байна *

*

*

  1. Мэдээллийг хариуцах: Мигель Анхель Гатан
  2. Мэдээллийн зорилго: СПАМ-ыг хянах, сэтгэгдлийн менежмент.
  3. Хууль ёсны байдал: Таны зөвшөөрөл
  4. Мэдээллийн харилцаа холбоо: Хуулийн үүргээс бусад тохиолдолд мэдээллийг гуравдагч этгээдэд дамжуулахгүй.
  5. Өгөгдөл хадгалах: Occentus Networks (ЕХ) -с зохион байгуулсан мэдээллийн сан
  6. Эрх: Та хүссэн үедээ мэдээллээ хязгаарлаж, сэргээж, устгаж болно.