बेहतर mapred या mapreduce पैकेज एक Hadoop नौकरी पैदा करने के लिए उपयोग करने के लिए है?

Question

MapReduce रोजगार के अवसर पैदा करने के लिए आप पुराने org.apache.hadoop.mapred पैकेज या मानचित्रकारों और कम करने, नौकरियाँ के लिए नए org.apache.hadoop.mapreduce पैकेज का उपयोग कर सकते ... पहले एक के रूप में पदावनत लेकिन इस बीच जो पूर्ववत हो गया चिह्नित किया गया था। अब मुझे आश्चर्य है कि नौकरी बनाने के लिए पुराने मानचित्रित पैकेज या नए मैड्रिड पैकेज का उपयोग करना बेहतर है या नहीं। या यह सिर्फ इस बात पर निर्भर है कि आपको मल्टीपलटेक्स्टऑटपुटफॉर्मैट जैसी चीजों की आवश्यकता है जो केवल पुराने मानचित्रित पैकेज में उपलब्ध है?

Answer 1

कार्यक्षमता के अनुसार पुराने (o.a.h.mapred) और नए (o.a.h.mapreduce) एपीआई के बीच बहुत अंतर नहीं है। एकमात्र महत्वपूर्ण अंतर यह है कि रिकॉर्ड पुराने एपीआई में मैपर/रेड्यूसर पर धकेल दिए जाते हैं। जबकि नया एपीआई पुल/पुश तंत्र दोनों का समर्थन करता है। आप पुल तंत्र here के बारे में अधिक जानकारी प्राप्त कर सकते हैं।

इसके अलावा, पुराने एपीआई 0.21 के बाद से un-deprecated किया गया है। आप नए एपीआई here के बारे में अधिक जानकारी प्राप्त कर सकते हैं।

जैसा कि आपने बताया है कि कुछ वर्गों (जैसे एकाधिक टेक्स्टऑटपुटफॉर्मैट) को नए एपीआई में माइग्रेट नहीं किया गया है, इसके कारण और उपर्युक्त कारण पुराने एपीआई (हालांकि एक अनुवाद आमतौर पर काफी सरल होता है) से चिपकना बेहतर होता है।

Answer 2

पुराने और नए दोनों एपीआई अच्छे हैं। हालांकि नया एपीआई क्लीनर है। नए API का उपयोग करें जहाँ भी आप कर सकते हैं, और पुराने एक का उपयोग भी आप विशिष्ट वर्गों कि

नई एपीआई में मौजूद (MultipleTextOutputFormat) की तरह नहीं कर रहे हैं लेकिन देखभाल के क्षेत्र में पुराने और नए एपीआई का एक मिश्रण का उपयोग नहीं लेते हैं की जरूरत है वही मैप्रिडस नौकरी। इससे अजीब समस्याएं होती हैं।

Answer 3

पुराने एपीआई (mapred)

1. पैकेज में मौजूद org.apache.hadoop.mapred

2. एक नक्शा प्रदान करें/काम विन्यास को कम।

3. , किसी कुंजी के लिए मूल्यों को कम कर देता
4. पैकेज इटरेटर के आधार पर Summary

नई एपीआई (mapreduce)

1. पैकेज में मौजूद है org.apache.hadoop.mapreduce

2. नौकरी कॉन्फ़िगरेशन अलग-अलग वर्ग द्वारा किया जाता है, जिसे जॉबकॉन्फ़ कहा जाता है जो exte है विन्यास
   कक्षा

3. की nsion किसी कुंजी के लिए मान कम कर देता है, Iterable

4. Package Summary