تكنولوجيا

عالم البيانات الضخمة – كل شئ عنة 2021

عالم البيانات الضخمة – كل شئ عنة 2021, أفكار للمقالات

عالم البيانات الضخمة

تعتبر مجموعة عالم البيانات الضخمة الكبيرة والمعقدة التي يصعب تخزينها ومعالجتها باستخدام أدوات معالجة البيانات وقاعدة البيانات التقليدية بيانات ضخمة.

يتم جمع عالم البيانات الضخمة من المصادر التقليدية والرقمية والتي ، عند تنقيحها بشكل صحيح ، يمكن استخدامها للبحث والتحليل.

مع مرور الوقت ، تنمو المنظمات ومع هذه البيانات التي تم إنشاؤها من هذه المنظمات تتزايد أيضًا بشكل كبير.

التحدي هو أن يكون لديك نظام أساسي يمكنه توفير عرض واحد متسق للبيانات الكاملة.

التحدي الآخر هو تنظيم هذه البيانات بحيث تكون منطقية ويمكن استخدامها كمعلومات مفيدة.

كل شيء من حولنا يولد بيانات ضخمة بشكل مستمر.

شاهد أيضاً: المصادقة الثنائية و حفظ كلمات المرور الخاصة بنا

مواقع التواصل الاجتماعي والمصادر الرقمية مسؤولة عن إنتاج مثل هذا الكم الهائل من البيانات.

كيف يتم نقل هذا الكم الهائل من البيانات – أجهزة الاستشعار والأجهزة المحمولة والأنظمة هي الحل.

من أين يأتي عالم البيانات الضخمة؟

وسائل التواصل الاجتماعي: تحصل شركات عالم البيانات الضخمة مثل Facebook و google على البيانات من أي أنشطة نقوم بها.

ومن الأمثلة الأخرى YouTube و Twitter و LinkedIn والمدونات ومشاركة الشرائح و Instagram و chatter و WordPress و Jive وما إلى ذلك.

الويب العام: يتضمن ذلك البيانات الواردة من ويكيبيديا ، وخدمات الرعاية الصحية ، والبنك الدولي ، والحكومة ، والطقس ، وحركة المرور ، وما إلى ذلك.

المحفوظات: يتضمن ذلك أرشيفات أي بيانات مثل السجلات الطبية ، ومراسلات العملاء ، ونماذج التأمين ، والمستندات الممسوحة ضوئيًا ، وما إلى ذلك.

المستندات: يعد توثيق أي تنسيق بما في ذلك HTML و CSV و PDF و XLS و Word و XML وما إلى ذلك مصادر عالم البيانات الضخمة.
الوسائط: الصور والفيديو والصوت والبث المباشر والبودكاست وما إلى ذلك.

تخزين البيانات: تعمل قواعد البيانات وأنظمة الملفات المختلفة المستخدمة لتخزين البيانات كمصدر للبيانات الضخمة.
بيانات سجل الجهاز: البيانات الواردة من الخادم ، وسجلات التطبيق ، وسجلات التدقيق.

و CDR- سجلات تفاصيل المكالمات ، وتطبيقات الهاتف المحمول المختلفة ، وموقع الهاتف المحمول ، إلخ.

بيانات الاستشعار: البيانات من أجهزة الاستشعار المتصلة بالأجهزة الطبية ، وكاميرات الطرق ، والأقمار الصناعية ، وأجهزة مراقبة حركة المرور ، وألعاب الفيديو ، والأجهزة المنزلية ، ووحدات تكييف الهواء ، ومباني المكاتب ، إلخ.

هناك 3Vs التي تحدد سرعة البيانات الكبيرة وتنوعها وحجمها

التنوع: هناك تنسيقات متعددة لتخزين عالم البيانات الضخمة، على سبيل المثال ، قاعدة البيانات ، MS-Access ، MS-Excel ، النصوص وغيرها الكثير.

يمكن أن يكون أيضًا في شكل pdf أو فيديو أو رسالة نصية قصيرة.

لذا فإن التحدي يكمن في ترتيب هذه البيانات لجعلها ذات مغزى ويكون أسهل عندما تكون البيانات بنفس التنسيق.

الحجم: حجم البيانات القادمة من مصادر متعددة ضخم.

مع هذه الزيادة في حجم البيانات ، من المهم للمنظمات إعادة تقييم بنيتها وتطبيقاتها.
السرعة: تشير السرعة إلى سرعة معالجة البيانات.

في الأيام السابقة ، كانت بيانات الأمس تعتبر بيانات حديثة ، ولكن الآن هذا الشيء صالح فقط في الصحف.

الراحة ، يتم تحديث كل شيء حتى في أقل من جزء من الثواني.

القناة الإخبارية ، وأجهزة الراديو ، والتغريدات ، ومنشورات فيسبوك ، وتعليقات كل شيء يتم تحديثه بسرعة كبيرة بحيث أن تحديث البيانات قبل دقائق قليلة يعتبر عديم الفائدة وقديم.

عالم البيانات الضخمة هي مزيج من البيانات غير المهيكلة والمنظمة والمتعددة الهياكل.

البيانات المهيكلة: البيانات ذات التنسيق المحدد والمنظمة في مخطط محدد مسبقًا تسمى البيانات المنظمة.

تعتبر البيانات القادمة من قواعد البيانات والمستودعات التقليدية.

مثل Mainframes و SQL Server و Oracle و DB2 و Sybase و Access و Excel و txt و Teradata أمثلة على البيانات المنظمة.

يتعامل نظام إدارة قواعد البيانات العلائقية مع هذا النوع من البيانات فقط.

البيانات غير المنظمة: تسمى البيانات غير المنظمة وليس من السهل تفسير مثل هذه البيانات باستخدام قواعد البيانات التقليدية أو نماذج البيانات البيانات غير المنظمة.

البيانات الواردة من وسائل التواصل الاجتماعي مثل الدردشة والتحليلات النصية والمدونات والتغريدات والتعليقات والنقرات والعلامات وما إلى ذلك.

عالم البيانات الضخمة متعددة الهياكل: البيانات متعددة الهياكل غير منمذجة ، يجب أن تكون منظمة ، على الرغم من أنه قد يكون هناك مخطط ولكن يتم تجاهله.

يمكن اشتقاقه من التفاعلات بين الإنسان والآلات.

يتضمن ذلك بيانات الأسواق الناشئة ، والتجارة الإلكترونية ، وبيانات الجهات الخارجية الأخرى مثل الطقس ، وتحويل العملات ، والديموغرافية ، واللوحة ، إلخ.

السابق
المصادقة الثنائية و حفظ كلمات المرور الخاصة بنا
التالي
صوفيا وكل شئ عن أجمل و أخطر روبوت في العالم