मैं एकाधिक नोड्स लॉग फ़ाइलों (मेरे मामले में अपाचे एक्सेस और त्रुटि लॉग में) से निर्यात करना चाहता हूं और एक निर्धारित नौकरी के रूप में बैच में डेटा को जोड़ना चाहता हूं। मैंने कई समाधान देखे हैं जो स्ट्रीमिंग डेटा के साथ काम करते हैं (यानी मुझे लगता है)। मुझे एक उपकरण चाहिए जो मुझे गंतव्य को परिभाषित करने के लिए लचीलापन देता है। यह आवश्यकता इस तथ्य से आती है कि मैं गंतव्य के रूप में एचडीएफएस का उपयोग करना चाहता हूं।क्या कोई मौजूदा बैच लॉग फ़ाइल एकत्रीकरण समाधान है?
मैं बैच में इसका समर्थन करने वाला कोई टूल नहीं ढूंढ पाया। पहिया को फिर से बनाने से पहले मैं अपने इनपुट के लिए स्टैक ओवरफ्लो समुदाय से पूछना चाहता था।
यदि कोई समाधान पहले से ही पाइथन में मौजूद है जो बेहतर होगा।