المحتوى
- كيف تصبح دتس أصغر
- No Bugs، No Stress - دليلك خطوة بخطوة لإنشاء برامج لتغيير الحياة دون تدمير حياتك
- أدوات التجارة
- بيانات كبيرة ، إمكانات كبيرة
يبعد:
كيفية جمع وتحليل البيانات الكبيرة ليست سوى جانب واحد من المعادلة. والآخر هو كيفية فهمه.
في 4 أكتوبر 2012 ، أعلن مارك زوكربيرج أنه وصل إلى معلم رئيسي: 1 مليار مستخدم نشط. لوضع هذا في خداع ، أخبر أحد المقابلات أن الشركات الأخرى الوحيدة التي لديها مليار عميل "ربما كوكاكولا وماكدونالدز".
هذا مجرد مثال واحد على الأعداد الكبيرة التي يتعين على الشركات الآن التعامل معها. الأعداد كبيرة للغاية بحيث لا يستطيع معظم الناس حمل أذرعهم من حولهم ، إذا جاز التعبير. ما يحدث هو أن تصبح هذه الأرقام مجردة. انهم كبيرة جدا ، انهم ليسوا حقيقيين بالنسبة لنا.
أضف إلى ذلك حقيقة أننا نقوم بمعالجة وتخزين المزيد والمزيد من المعلومات كل يوم ونجد أنفسنا غير قادرين على التعامل مع كل من كمية البيانات وحجم القيم الفردية. تعالج Google حوالي 24 بيتابايت في اليوم ، بينما تستخدم لعبة الفيديو "وورلد أوف واركرافت" 1.3 بيتابايت من مساحة التخزين للحفاظ على لعبتها.
الآن هذه أعداد كبيرة. المشكلة إذن لا تصبح فقط كيفية التعامل مع هذه الكميات الضخمة من البيانات ، ولكن أيضًا كيفية فهمها. الحمد لله ، تأتي المساعدة من مجموعة متنوعة من الاتجاهات في هذه المناطق. (احصل على بعض المعلومات الأساسية عن كيفية استخدام البيانات الضخمة في هذا الرسم البياني ، إضفاء الطابع الإنساني على البيانات الضخمة.)
كيف تصبح دتس أصغر
خلال السنوات القليلة الماضية ، قام والد شبكة الويب العالمية ، السيد تيم بيرنرز لي ، بحملة نشطة من أجل البيانات المفتوحة ، والتي تم تعريفها على أنها بيانات متاحة للجميع لاستكشافها وتحليلها. في فيديو TED ، يقدم Berners-Lee أمثلة على كيفية الوصول إلى البيانات أدى إلى ظهور العنصرية في أوهايو وساعد في توفير الرعاية الصحية التي تمس الحاجة إليها لمخيمات اللاجئين في هايتي.من الواضح أن هذه تطبيقات انتقلت فيها البيانات من التجريد إلى الواقع.
ربما يكون هانز روزلينج هو المطور الأكثر شهرة لطرق تقديم البيانات الإحصائية في رسومات سهلة الفهم. برنامج Gapminder الخاص به ، وهو برنامج يحول الإحصاءات الدولية إلى رسومات تفاعلية متحركة ، متاح للتنزيل على جميع أنواع أجهزة الكمبيوتر الشخصية. (يمكنك العثور على بعض الأمثلة الرائعة حول كيفية استخدامه في نقاش TED هذا. تمت مناقشة تطوير Gapminder في حديث آخر.) نسيت المخططات الدائرية: يقدم هذا البرنامج إحصائيات ليس فقط بطريقة منطقية ، ولكن بهذا يكون له انطباع أيضًا . لن تحصل مطلقًا على قشعريرة من إحصاءات الكتب ، ولكن هذه الرسومات تحوي ما يكفي من الثقوب لتفجير عقلك.
في حين أن روزلينج أستاذ في علم الإحصاء ، فإن ديفيد ماكاندلس هو صحفي لم يهتم إلا في الآونة الأخيرة بتصميم طرق لتقديم تحليل البيانات بطريقة تسترشد حقًا. يقدم حديث TED الخاص به أمثلة على تصورات للبيانات لدراسات متنوعة مثل الاهتمامات المجتمعية حول ألعاب الفيديو ، وفعالية مكملات الفيتامينات ، والانهيارات الرومانسية حسب الموسم والشهر. بالنسبة إلى McCandless ، تقدم البيانات اتجاهًا جديدًا فريدًا في مجال الصحافة ، وطريقة لاستكشاف موضوع وتقديم نظرة ثاقبة بطريقة لم تكن ممكنة من قبل. (يمكنك الاطلاع على بعض الأمثلة المذهلة حقًا لكيفية تطبيق ذلك في دليل صحافة البيانات.)
كريس جوردان يأخذ نهجا مختلفا. بخلاف Rosling و McCandless ، يعتمد الأردن على خلفيته كفنان لتقديم معلومات حول موضوعات مثل الوفيات الناجمة عن التدخين ، والسجن في السجون ، وإدمان المخدرات بوصفة طبية وغيرها من القضايا الرئيسية بطريقة جميلة وقوية على حد سواء. معلوماته - أو بياناته - كفن ، وفي حالة الأردن ، بعض التعليقات السياسية القوية. (يمكنك التحقق من الأردن العمل هنا.)
No Bugs، No Stress - دليلك خطوة بخطوة لإنشاء برامج لتغيير الحياة دون تدمير حياتك
لا يمكنك تحسين مهارات البرمجة لديك عندما لا يهتم أحد بجودة البرنامج.
الأردن و Rosling و McCandless هم فقط ثلاثة من الأشخاص العديدين الذين يحاولون الاستفادة بشكل كبير من البيانات الضخمة الموجودة الآن في العالم ، لكن هذه المجموعة من رواد البيانات الضخمة تنمو.
أدوات التجارة
قبل أن نتمكن من تحويل البيانات إلى شيء مفيد ، يجب أولاً أن نفهمها. يجب إنشاء الأدوات لفهم التوسع الهائل في الحقائق والبيانات التي يتم إنشاؤها كل عام من قبل العلماء والأكاديميين والشركات. أظهرت دراسة IDC برعاية EMC في عام 2011 أن البيانات تتضاعف باستمرار ، وتستغرق أقل من عامين في كل مرة. ذكرت الدراسة كذلك أنه سيتم إنشاء وتكرار النسخ الضخمة 1.8 zettabytes في عام 2011.
زيتا بايت؟
نعم ، هذا هو 1000 إكسبايت و إكسبايت هو 1000 بيتابايت (والتي قد تتذكرها هي 1000 تيرابايت ، والتي بدورها هي 1000 غيغابايت).
الآن هناك عدد من الصعب وضع ذراعيك حولها! تحاول دراسة التوافق الكهرومغناطيسي (EMC) وضعه في حالة خداع من خلال تقديم بعض الأمثلة المثيرة للاهتمام حول ما يعادل 1.8 زيتا بايت:
- كل شخص في الولايات المتحدة يتغرد بثلاث تغريدات في الدقيقة لمدة 26،976 سنة دون توقف
- يقوم كل شخص في العالم بأكثر من 215 مليون عملية تصوير بالرنين المغناطيسي عالية الدقة بالاشعة يوميًا
- أكثر من 200 مليار فيلم HD (كل ساعتين في الطول). سيستغرق مشاهدة كل فيلم شخصًا 47 مليون عام إذا شاهدوه طوال اليوم.
- كمية المعلومات اللازمة لملء 57.5 مليار 32 جيجابايت أبل أي باد.
مع العديد من أجهزة iPad ، يمكننا:
- أنشئ جدارًا من أجهزة iPad يصل طوله إلى 4005 ميلًا وارتفاعه 61 قدمًا يمتد من أنكوراج ، ألاسكا ، إلى ميامي ، فلوريدا.
- بناء سور الصين العظيم باد. (سيكون ضعف متوسط الارتفاع الأصلي.)
- بناء جدار ارتفاع 20 قدما حول أمريكا الجنوبية
- تغطية 86 في المئة من مكسيكو سيتي
- بناء جبل أعلى 25 مرة من جبل. فوجي
لتكون قادرة على جعل هذه البيانات مفيدة - لتحويلها إلى معلومات مفيدة ، لا نحتاج فقط إلى التطبيقات و "عمليات المزج" - الزواج من الخدمات مثل عناوين Google Earth و New York Times International أو دليل مطاعم NYC مع قسم NYC Health Dept التقييمات - ولكن أيضًا أدوات قوية جدًا لتصفية وفرز وتحليل مجموعات البيانات لتوفير المعلومات اللازمة لاتخاذ القرارات والدراسات العلمية والتحليل الصعب. طورت شركة IBM هذه الأدوات ، والتي يشار إليها مجتمعة باسم Smarter Analytics ، لاستخدامها جنبًا إلى جنب مع البيانات الضخمة والخدمات السحابية. تقوم بتجميع البرامج والأجهزة والخدمات الاستشارية لمحاولة توفير منصة المعلومات التي يمكن من خلالها اتخاذ القرارات التجارية والعلمية. تتواصل Hewlett-Packard و Oracle والعديد من شركات تكنولوجيا المعلومات أيضًا مع العملاء مع المنتجات لمحاولة التعامل بفعالية مع وفرة المعلومات هذه.
بيانات كبيرة ، إمكانات كبيرة
لتحقيق إمكانات عصر البيانات الجديد هذا ، نحتاج إلى العديد من الأنظمة والتطبيقات. نحتاج إلى متخصصي تكنولوجيا المعلومات من خلال تعليم ومهارات القرن الحادي والعشرين. نحتاج إلى متخصصين في التطبيقات يفهمون حقًا احتياجات واحتياجات الشركات والصناعة والوكالات الحكومية والجيش ورجال الأعمال والباحثين. نحتاج أيضًا إلى محللين هادئين وناضجين سيتساءلون عن الأحكام الصادرة بناءً على تحليل البيانات. سيكون من السهل أن تطغى عليها أدوات الكمبيوتر القوية التي تعمل على "السحر" على كتل البيانات. يجب أن يسود المنطق السليم دائمًا أو ، على الأقل ، يتطلب إعادة صياغة البيانات.
نحن نعلم بالفعل أن إمكانات البيانات الكبيرة لا حدود لها ، ولكن كذلك القدرة على الخطأ. لذلك ، قد تكون الأدوات التي تم تصميمها لفهم كل هذه المعلومات هي المفتاح لف لف أذرعنا حول مشكلة البيانات الكبيرة.