ذكري المظهر

Amazon Automates Hadoop Use for Developers

Automate Hadoop Cluster Deployment | Plan your Cluster | Edureka

Automate Hadoop Cluster Deployment | Plan your Cluster | Edureka
Anonim

أطلقت Amazon.com خدمة مستضافة تهدف إلى تبسيط للمطورين باستخدام تطبيق Hadoop لنموذج برمجة MapReduce لمعالجة مجموعات البيانات الكبيرة في مجموعات المعالج.

تسمى Amazon Elastic MapReduce ، تستهدف خدمة الحوسبة السحابية المطورين تحتاج تطبيقاتها إلى إحداث كميات كبيرة من البيانات ، والتي تعد Hadoop مناسبة لها بشكل مثالي.

مع Amazon MapReduce ، فإن العديد من المهام التي يحتاج المطورون إلى التعامل معها يدويًا والمتصلة بـ Hadoop يتم إجراؤها تلقائيًا ، والحوسبة السحابية لشركة Amazon Web Services (AWS) وقال الانقسام في بلوق الرسمية يوم الخميس.

[اقرأ المزيد: أفضل خدمات البث التلفزيوني]

"باستخدام مطاط مابريديوس ، يمكنك إنشاء ، تشغيل ، مراقبة ، والتحكم في وظائف Hadoop مع سهولة نقطة وانقر. لا يجب عليك الخروج وشراء مجموعات من الأجهزة. لا يتعين عليك رفعه أو شبكه أو إدارته. لا داعي للقلق بشأن نفاد الموارد أو مشاركتها مع أعضاء آخرين في مؤسستك. لن تحتاج إلى مراقبته أو ضبطه أو قضاء بعض الوقت في ترقية النظام أو برنامج التطبيق عليه. " خدمة الحوسبة السحابية المرنة (EC2) ، التي توفر قدرة حوسبة مستضافة ، ولأن Hadoop أصبحت ذات شعبية متزايدة ، يهدف Amazon إلى تسهيل الأمر على مطورين آخرين للاستفادة من هذا التطبيق المفتوح المصدر لـ MapReduce.

MapReduce Elastic يعمل بالاقتران مع استضافت EC2 وخدمة Amazon Simple Storage Service (S3) خدمة التخزين السحابي. "MapReduce مطاطي يدور تلقائيًا لتنفيذ Hadoop لإطار MapReduce في حالات Amazon EC2 ، وتقسيم البيانات في تدفق عمل إلى أجزاء أصغر حتى يمكن أن تكون معالجة - وظيفة "الخريطة" - بالتوازي ، وفي نهاية المطاف إعادة تجميع البيانات المعالجة في الحل النهائي - وظيفة "تقليل". يعمل Amazon S3 كمصدر للبيانات التي يتم تحليلها ، وكوجهة إخراج للنتائج النهائية ، "وفقًا لوصف منفصل للخدمة.

كما هو الحال مع الخدمات السحابية الأخرى في AWS ، تقوم Amazon بتكلفة MapReduce المرنة استنادًا إلى الاستخدام ، دون رسوم الحد الأدنى.