داده های بزرگ (Big Data) را بیشتر بشناسید

در دنیای امروزی با رشد فوق العاده سریع دادههای دیجیتال روبرو هستیم به طوری که روزانه میلیونها گیگابایت داده جدید توسط کاربران شبکههای اجتماعی، سامانههای مربوط به جمعآوری داده در سازمانها، حسگرهای صوتی و تصویری، رسانهها و … تولید میشود.

بدیهی است این حجم از دادهها بدون تحلیل و پردازش فاقد کارایی و مفهوم مناسب و کاربردی خواهند بود. اما از سوی دیگر افزایش حجم دادهها پیچیدگیهایی پیرامون تحلیل، جستجو، به اشتراک گذاری، فضای مورد نیاز برای ذخیرهسازی، انتقال، مصورسازی،حریم خصوصی و … به وجود آورده که تحقق آنها را از عهدهی روشهای معمولی تقریبا ناممکن کرده است.

در این حالت ما با داده های بزرگ Big Data مواجه هستیم.

طبق تعریف داده های بزرگ (Big Data)

در سال ۲۰۰۱، تحلیلگر صنعت، داگ لنی (که اکنون با گارتنر کار میxad کند)، داده های بزرگ یا Big Data را به صورت سه V تعریف کرد: حجم (Volume)، سرعت (Velocity) و تنوع (Variety).

• حجم: فاکتورهای بسیاری به افزایش حجم داده xadها کمک میxad کند. دادهxad های بر پایه تراکنش ذخیره شده در طی سالیان، داده xadهای غیرساختارمند سرازیر شده از رسانه xadهای اجتماعی؛ مقدار در حال افزایش دادهxad های ماشین-به-ماشین و سنسور جمع xadآوری شده. در گذشته، حجم انبوه داده یک مسئله ذخیره کردن بود. اما با کاهش هزینه xadهای ذخیره، مسائل دیگری سر بر می xadآورند؛ شامل چگونگی تعیین ارتباط در حجم زیاد دادهxad ها و چگونگی استفاده از علم تجزیه و تحلیل به منظور ایجاد ارزش از داده xadهای مرتبط.
• سرعت: دادهxad ها با سرعتی بی xadسابقه وارد شده و باید در زمان مناسب به سراغ آنxadها رفت. تگxad های RFID، سنسورها و اندازهxad گیری هوشمند، نیاز به سر و کله زدن با جریانات داده را در اولین زمان نزدیک به اکنون را ایجاد میxad کنند. واکنش سریع به کار با سرعت داده xadها، چالشی برای بیشتر سازمانxad هاست.
• تنوع: دادهxad ها به شکلxad های گوناگونی وارد میxad شوند. داده xadهای عددی ساختاریافته در پایگاهxad های داده سنتی؛ اطلاعات ایجاد شده از برنامهxad های کاربردی کسب xadوxadکار؛ اسناد متنی غیرساختاریافته، ایمیل، صدا و تراکنشxad های مالی. مدیریت، ادغام و حاکمیت بر انواع گوناگون داده، چیزی است که بسیاری از سازمانxad ها هنوز با آن درگیرند.

چرا Big Data باید برای شما مهم باشد؟

مسئله واقعی این نیست که مقدار زیادی داده به دست آورید؛ این است که با آن چه میxad کنید. دیدگاه امیدوارانه این است که سازمانxad ها قادر به تحصیل داده از هر منبعی بوده، دادهxad های مرتبط را تهیه کرده و آن را تحلیل کنند تا پاسخ سؤالاتی را بیابند که ۱) کاهش هزینهxad ها، ۲) کاهش زمان، ۳) توسعه محصولات جدید و پیشنهادات جدید، و ۴) تصمیم xadگیری هوشمندانه xadتر کسب xadوکار را مقدور می xadسازند. برای مثال، با ترکیب Big Data و تحلیلxad های قوی، این امکان وجود دارد تا:

• علت های اصلی شکست ها، مسائل و نقوص را در لحظه تعیین کرد تا سالانه تا میلیاردها دلار صرفهxad جویی کرد.
• مسیر وسیله xadهای حمل بستهxad های تحویلی را زمانی که هنوز در جاده هستند، بهینه کرد.
• در چند دقیقه تمام سبد ریسک را دوباره حساب کرد.
• سریعاً مشتریانی که بیشترین اهمیت را دارند، شناسایی کرد.
• ……

داده های بزرگ یا Big Data واژه xadای است برای مجموع هxadای از ست داده xadهای بسیار بزرگ و پیچیده، که استفاده از ابزارهای مدیریت پایگاه داده در دست و یا برنامه xadهای کاربردی سنتی پردازش داده، برای پردازش آنxadها دشوار خواهد بود. چالشxad ها شامل استخراج، Curation، ذخیره xadسازی، جستجو، اشتراک، انتقال، آنالیز و بصری xadسازی است. در سال ۲۰۱۲، محدودیت اندازه ست داده xadها، با زمان پردازش معقول، بر اگزابایت، میلیون ترابایت، قرار داشت.

کار با Big Data با استفاده از سیستم xadهای مدیریت دیتابیس xadهای رابطه xadای و بسته xadهای بصری xadسازی و تحلیل xadهای دسکتاپ، دشوار بوده و نیازمند نرم xadافزار بسیار موازی در حال کار بر روی دهxad ها، صدها و یا حتی هزاران سرور هستند. آنچه که Big Data شناخته می xadشود، بنا بر قابلیت xadهای سازمان مدیریت کننده آن، و قابلیتxad های برنامه xadهای کاربردی که به طور سنتی در آن زمینه داده پردازش و تحلیل میxad کنند، متفاوت است. برای برخی سازمانxad ها، رویارویی با صدها گیگابایت داده برای اولین بار ممکن است نیاز به بازبینی آپشن xadهای مدیریت داده را ایجاد کند. برای برخی دیگر، ممکن است تا ده xadها و صدها ترابایت طول بکشد که سایز داده به موضوعی قابل توجه تبدیل شود.

.

تهیه و گردآوری: تکرا