انتشرت عبارة big data فى الفترة الأخيرة بشكل كبير و قبل أن نتطرق لتعريف البيانات الضخمة، علينا اولاً أن نعرف ما هي البيانات، وما اختلافها عن المعلومات المعلومات هي مخرجات أية عملية معالجة للبيانات الخام
عرف معهد ماكنزي العالمي سنة 2011 البيانات الضخمة أنها أي مجموعة من البيانات التي هي بحجم يفوق قدرة أدوات قواعد البيانات التقليدية من إلتقاط، تخزين، إدارة و تحليل تلك البيانات , مؤخرًا اثرت البيانات الضخمة او big data على جميع المجالات.
والبيانات الضخمة او Big data تعتبر جزء حيوي لعملية Data mining او التنقيب فى البيانات.
إذًا ماهو Data mining ؟
عملية التنقيب ببساطة هو محاول استخدام خوارزميات وطرق معقدة من اجل استخلاص معلومات دقيقة ذات فائدة عالية من كم هائل من البيانات او Big data , وقد توظف هذه المعلومات فى التنبؤ بالمستقبل او احداث معينة.
مثل هذه المعلومات توظف بشكل كبير فى عالم الاعمال والاقتصاد وفهم العمليات التجارية فعلى سبيل المثال تستخدم لمعرفة سلوك الاسهم فى البورصة ومحاولة معرفة الاسهم الرابحة عن طريق تحليل كم كبير من البيانات لسلوك هذه الاسهم فى الماضى و الحاضر.
ماهى انواع البيانات Data
تنقسم إلى ثلاثة انواع :
- البيانات الخام او Data بدون اي تحليل
- المعلومات او Information وهى بيانات تم تحليلها للحصول على معلومات بسيطة
- المعرفة Knowledge وهى بيانات تم تحليلها بطرق اكثر تعيقدًا
مثال لاستخدام Data mining
شركة Wal-Mart وول مارت الشهيرة فى الولايات المتحدة الامريكية لمحلات السوبر ماركت اردات زيادة مبيعاتها فى السوق بدون اي تكلفة اضافية. فاقترح احد العاملين بالشركة محاولة فهم سلوك الزبائن ومحاولة ربط المنتجات التى تبع مع بعضها.
بالفعل بملاحظة سلوك ملايين العملاء استطاعوا ربط المنتاجات ببعضها عن طريق ملاحظة سلوك المشترين وزادت اربحاهم بطريقة كبيرة بفضل العروض على هذه المنتجات مع بعضها , هذه الطريقة الان تسمى Market basket analysis.
بيانات ضخمة ! كم هى ضخمة ؟
ولكى تدرك مدي ضخامة هذه البيانات اليك بعض الامثلة
مسح سلووان الرقمي للسماء: Sloan Digital Sky Surve
وهو مشروع بحثى أمريكى يهدف الى مسح فلكى للسماء باستخدام تليسكوب عملاق متصل بمستشعرات لجمع البيانات عن تكوين النجوم فى مجرة درب التبانة
عندما تم البدء بجمع البيانات الفلكية في عام 2000، فإنه قد تم جمع بيانات في أسابيعه القليلة الأولي أكثر مما تم جمعه في تاريخ علم الفلك بأكمله. ومع استمراره بمعدل 200 جيجا بايت في الليلة، جمع أكثر من 140 تيرابايت من المعلومات.
Wal-Mart متجر وول مارت
وهى شركة أمريكية للبيع بالتجزئه ومن اكبر سلاسل السوبر ماركت فى الولايات المتحدة الامريكية بعائدات تبلغ 387.69 مليار دولار أمريكى وتقوم بمعالجة أكثر من مليون معاملة تجارية كل ساعة، والتي يتم استيرادها إلي قواعد بيانات يُقدر أنها تحتوي علي أكثر من 2.5 بيتابايت (2560 تيرابايت) من البيانات – وهو ما يوازي 167 ضعف البيانات الواردة في جميع الكتب الموجودة في مكتبة الكونغرس في الولايات المتحدة
برنامج المحادثات الفوريه الأشهر واتس آب Whatsapp
يتحدث الجميع الآن عن الصفقة الضخمة التى نتج عنها شراء الشركة العملاقة فيس بوك للبرنامج الشهير. لدى واتس آب أكثر من 450 مليون مستخدم، 70 % منهم نشطين و يتم تداول اكثر من 10 مليار رسالة و حوالي 400 مليون صورة بشكل يومي وفي 31 ديسمبر 2013 ، وصل عدد الرسائل عبر الواتسب الى 18 مليار رسالة في يوم واحد.
واليك اشهر استخدامات لل big data
1. فهم و جذب الزبائن
وهى من اهم استخدامات ال big data فى الوقت الحالى فهى تستخدم للتعرف على سلوك الزبون واحتاجته فالشركات مؤخرًا حريصة على تسويع قواعد بيانتها التقليدية الى قواعد بيانات اجتماعية لقراءة الصورة الكاملة لسلوك عملائها فشركات التسويق على سبيل المثال قادرة الان على التنبأ بالمنتجات التى تستهويك و حتى الحكومات قادرة على تنبأ نتائج الانتخابات بفضل big data
2. فهم العمليه التجارية
تستخدم big data بشكل متزايد لتحسين العمليات التجارية فمحلات التجزئة قادرة على التنأ بأحتياجات الزبون بناء على المعلومات من مواقع التواصل الاجتماعى و الاشياء الاكثر بحثًا على محركات البحث وكذلك تنبأت الطقس ومثال على ذلك متجر وول مارت: Wal-Mart الذي سبق ذكره
استخدام اخر لل big data فى شركات النقل لتحسين العملية المرورية عن طريق استخدام بيانات مرورية حية
3. فى الاستخدامات الشخصية
لا تقتصر الاستفادة من big data على الشركات والحكومات فحسب بل يمكن الاستفادة الشخصية منها على سبيل المثال الساعات الذكية التى تجمع معلومات على مدار اليوم عن السعرات الحرارية والحركة و نمط النوم
تحليل كل هذا الكم من البيانات هينعكس بالطبع على الاستخدامات الفردية
4. الاستخدامات الصحية
بفضل big data اليوم اصبح ممكن الممكن فك شفرة الحمض النووي DNA فى دقائق و الذي يسمح باكتشاف علاجات جديدة و فهم الامراض و التبأ بالاوبئة بشكل افضل , فقط تخيلى ما الذي سيحدث عند تجميع و تحليل بيانات الساعات الذكيه من ملايين الناس فالتجارب الطبية فى المستقبل القريب لن تكون محصورة فعينة بسيطة من الناس بل ستشمل الجميع
تقنية big data اليوم مستخدمة فى وحدة الاطفال المرضي لمراقبه دقات القلب ونمط التنفس لكل طفل وسمح هذا للوحدة بتطوير خوارزمية للتنبأ بالعدوي قبل 24 من ظهور الاعراض الجسمانيه
واكثر من هذا فقد سمحت لنا big data مراقبة والتنبأ بالأوبئة و انتشار الامراض عن طريق دمج البيانات من السجلات الطبية مع البيانات من مواقع التواصل الاجتماعى عن طريق الاستماعى الى ما ينشره الناس مثل خاصية الفيس بوك “فلان يشعر بالبرد اليوم”
5. تحسين الاداء الرياضي
معظم النخب الرياضية اليوم تستفيد من big data بشكل او اخر اداة IBM SlamTracker لبطولات التنس ونتسخدم ايضًا تحليلات الفديو للاعبين كرة القدم لمراقبة اداءهم , بعض الفرق الرياضية الكبيرة تتبع اللاعبين خارج النادي لمعرفة نمط نومه وتغذيته.
