16

الأهميّة المتزايدة للبيانات الضخمة Big Data والتنقيب عن المحتوى في سماء التقنية

يتزايد الحديث مؤخّرا بشكل مستمر حول أهمية التأقلم مع بيئة البيانات الضخمة Big Data التي باتت تحيط بنا من كلّ جنب، إذ أنّ عوالمها تحتاج الكثير من المهارات البرمجية والتحليلية للسماح بتخزين وتحليل حجم البيانات الضخمة هاته، والحديث عن البيانات الضخمة يعني تلقائيا الحديث عن الأبن المدلّل Hadoop الذي يعتبر المرجعية التقنية لاستقبال وتخزين هذه البيانات.

لأجل هذا قمت بافتتاح مجتمعين للحديث بتفصيل أكبر ولكي يكون فضاءا لاستعراض جديد هذه التقنيات وطرق استخدامها والاستفادة منها، أدعو كل مهتمّ بهذه العوالم الانضمام لهذين المجتمعين.

البيانات الضخمة - BigData

هادوب - Hadoop


BigData لها علاقة كبيرة بData Analysis و Data Science ، ولا يمكن الاستغناء عنهما من أجل فهم و التحكم في Bigdata

بالفعل، فهنالك أكثر من مرحلة في عملية استغلال البيانات الضخمة، ابتداءا من استخراجها وجمعها وفي هذا السياق توجد وسائل عدّة وكثيرة تسمح بهذا العمل حسب طبيعة البيانات بنوية او غير بنوية، بعدها تأتي مرحلة التخزين وهنالك وسائط عديد من أجل ذلك وفي كلّ منها مبدؤه، لتأتي المرحلة النهائية التي تتخصّص في التحليل وإنطاق البيانات وتحويلها لمعلومات حيوية من أجل تحقيق منافع اقتصادية او بحثية حسب السياق، والميزانيات الضخمة المسخّرة لهذا يجب أن يتمّ تبريرها لاحقا بROI مجزي لتمويل مجمل العمليات مستقبلا كونها مكلفة للغاية.

الجدير بالذكر أنّ Hadoop يوفّر بيئة عمل متكاملة ونظام حيوي ecosystem فعّال من أجل الوصول للغاية النهائية والتركيز على التحليل.

بخصوص Data Science فقد يكون صاحبها غير خبير في البرمجة (رغم أن هذا اقلّ شيوعا مؤخّرا) بل مدركا أكثر لمفاهيم الاحصائيات وتحليل البيانات وهي مجالات قائمة بذاتها وبالغة التعقيد.

شكرا لما أضفته صديقي مبرمج.

ما قلته صحيح ، ف Data Scientists الموظفين في الشركات الكبيرة تكون لديهم غالبا دكتوراه في إحصائيات أو رياضيات أو فيزياء

تأكد من ذلك من خلال صفحة Google Careers ، و أقترح عليك مشاهدة مواضيع Quora فهي كثيرة و رائعة جدا ، قضيت 6 ساعات أمس في قراءتها،

أمثلة لبعض مواضيع اليوم :

http://www.quora.com/When-d...

http://www.quora.com/Is-the...

http://www.quora.com/What-i...

http://www.quora.com/How-do...

http://www.quora.com/What-i...

http://www.quora.com/Why-is...

وهذه بعض الاقسام (مع العلم انها كثيييرة جدا في مجال Data)

http://www.quora.com/Data-S...

http://www.quora.com/Data-A...

http://www.quora.com/Data

http://www.quora.com/Big-Data