hadoop-streaming

12गर्मी

1उत्तर

Hadoop स्ट्रीमिंग: IdentityMapper गलत तरीके से

मैं नक्शाकार और कम करने निष्पादनयोग्य सी # में लिखा है इस्तेमाल किया जा रहा। मैं Hadoop स्ट्रीमिंग के साथ इन का उपयोग करना चाहते। यह आदेश मैं Hadoop काम बनाने के लिए उपयोग कर रहा हूँ ... hadoop jar $H

c# mono hadoop-streaming 2012-11-02

---

7गर्मी

3उत्तर

मैं एक पाइथन हडोप स्ट्रीमिंग नौकरी के लिए पैरामीटर कैसे पास करूं?

एक पाइथन हडोप स्ट्रीमिंग नौकरी के लिए, मैं पैरामीटर कैसे पास करूं, उदाहरण के लिए, reducer स्क्रिप्ट ताकि यह पारित होने वाले पैरामीटर के आधार पर अलग-अलग व्यवहार करे? मैं समझता हूँ कि स्ट्रीमिंग नौकरियो

python hadoop hadoop-streaming 2012-03-01

---

9गर्मी

6उत्तर

क्या हडोप के साथ पायथन का उपयोग करने के लिए कोई वितरित मशीन लर्निंग लाइब्रेरी है?

मैंने विभिन्न मानक मशीन सीखने के कार्यों को पूर्ववत करने के लिए अमेज़ॅन लोचदार MapReduce के साथ खुद को स्थापित किया है। मैंने अतीत में स्थानीय मशीन सीखने के लिए पायथन का व्यापक रूप से उपयोग किया है और

python hadoop mapreduce hadoop-streaming elastic-map-reduce 2013-01-09

---

5गर्मी

2उत्तर

अपाचे पिग

के साथ पिवट तालिका मुझे आश्चर्य है कि अपाचे पिग में एक पास में एक टेबल को पिवॉट करना संभव है। इनपुट: Id Column1 Column2 Column3 1 Row11 Row12 Row13 2 Row21 Row22 Row23 आउटपुट: Id Name Value 1

apache-pig hadoop-streaming 2012-06-26

---

6गर्मी

2उत्तर

अमेज़ॅन लोचदार MapReduce - SIGTERM

मेरे पास एक ईएमआर स्ट्रीमिंग जॉब (पायथन) है जो सामान्य रूप से ठीक काम करती है (उदाहरण के लिए 10 मशीन 200 इनपुट प्रोसेसिंग)। हालांकि, जब मैं इसे बड़े डेटा सेट के खिलाफ चलाए (12 मशीनों, 6000 आदानों की क

python hadoop-streaming elastic-map-reduce amazon-emr 2012-08-15

---

6गर्मी

2उत्तर

रैक-स्थानीय मानचित्र कार्यों और डेटा-स्थानीय मानचित्र कार्यों के बीच क्या अंतर है?

जब मैं "हैडोप जॉब -स्टैटस xxx" चलाता हूं, तो निम्नलिखित कुछ सूची आउटपुट करें। Rack-local map tasks=124 Data-local map tasks=6 रैक-स्थानीय मानचित्र कार्यों और डेटा-स्थानीय मानचित्र कार्यों के बीच क्

hadoop mapreduce hadoop-streaming 2012-10-07

---

8गर्मी

1उत्तर

अमेज़ॅन MapReduce लॉग विश्लेषण के लिए सर्वोत्तम प्रथाओं

मैं अपाचे, निजिनक्स, डार्विन (वीडियो स्ट्रीमिंग सर्वर) द्वारा उत्पन्न एक्सेस लॉग को पार्स कर रहा हूं और दिनांक/रेफरर/उपयोगकर्ता द्वारा प्रत्येक वितरित फ़ाइल के आंकड़े एकत्रित कर रहा हूं। लॉग के टन हर

amazon-s3 hadoop logging elastic-map-reduce hadoop-streaming 2012-03-23

---

6गर्मी

2उत्तर

एमआरओबी

में इनपुट फ़ाइल का नाम कैसे प्राप्त करें मैं mrjob का उपयोग कर एक मानचित्र फ़ंक्शन लिख रहा हूं। मेरा इनपुट एचडीएफएस पर निर्देशिका में फाइलों से आएगा। फ़ाइलों के नामों में एक छोटी लेकिन महत्वपूर्ण टुकड

python hadoop hadoop-streaming mrjob 2012-07-11

---

7गर्मी

1उत्तर

अजगर Hadoop स्ट्रीमिंग: स्थापना एक नौकरी नाम

मैं एक नौकरी कि उपयोग करते हुए मेरे क्लस्टर पर चलता है Hadoop स्ट्रीमिंग मैं एक नया काम है जिसके लिए मैं एक नौकरी नाम जोड़ना चाहते हैं शुरू करने के लिए है, मैं कैसे पारित कर सकते हैं जॉब नाम सेट करने

python hadoop mapreduce hadoop-streaming 2012-07-17

---

6गर्मी

2उत्तर

निर्देशिका पास करने के लिए फ़ाइलों को पास नहीं किया है?

मेरे काम में, मुझे कई ऐतिहासिक लॉगसेट्स को पार्स करने की आवश्यकता है। व्यक्तिगत ग्राहक (हजारों हैं) में सैकड़ों लॉग उप-निर्देशिकाएं आज तक टूटी हो सकती हैं। लॉग/Customer_One/2011-01-02-001 लॉग/Customer

hadoop hadoop-streaming 2012-04-10

---