मास्टर-स्लेव सेटअप में अपाचे सोलर फ़ेलओवर समर्थन

Question

हमारी विकास टीम वर्तमान में अपाचे सोलर में हमारी खोज प्रणाली माइग्रेट करने की तलाश में है, और हम सेटअप पर कुछ सलाह की सराहना करेंगे। हम लगभग दो सौ मिलियन डेटाबेस पंक्तियों को अनुक्रमणित कर रहे हैं। हम पूरे दिन लगभग सौ हजार नई पंक्तियां जोड़ते हैं। ये नई डेटाबेस पंक्तियां उनकी रसीद के दो मिनट के भीतर खोजने योग्य होनी चाहिए।

हम नहीं चाहते हैं कि इंडेक्सिंग खोजकर्ता को घुमाए, इसलिए हमारा विचार दो सोलर सर्वर एक प्रतिकृति सेटअप में विभिन्न मशीनों पर चल रहा है। पहला सौर उदाहरण सूचकांक होगा। यह डेल्टा को इंडेक्स करने के लिए DataImportHandler का उपयोग करेगा और अतिसंवेदनशील प्रतिबद्ध दरों को रोकने के लिए स्वत: अनुकूल सक्षम होगा। अनुसूचित अवधि के दौरान सूचकांक अनुकूलन होगा। दूसरा सौर उदाहरण (दास) प्राथमिक खोजकर्ता होगा और इसकी अनुक्रमणिका इंडेक्स RAIDed ठोस राज्य ड्राइव पर संग्रहीत होगी।

हम किस बारे में चिंतित हैं विफलता है। हमारी खोज मिशन-महत्वपूर्ण हैं। यदि प्राथमिक खोजकर्ता किसी भी कारण से नीचे चला जाता है, तो हमारी खोज सेवा स्वचालित रूप से इंडेक्सर नोड पर क्वेरी को शंट कर देगी। इंडेक्सिंग समान रूप से महत्वपूर्ण है, हालांकि। अगर सूचकांक मर जाता है, तो हमें एक गर्म विफलता की आवश्यकता होती है। क्या सौर प्रतिकृति में मास्टर नोड विफलता स्वचालित करने के लिए एक अनुशंसित तरीका है? मैंने चिड़ियाघर में देखना शुरू कर दिया है, लेकिन मुझे यकीन नहीं था कि यह सबसे अच्छा तरीका है या नहीं।

Answer 1

जैसा कि आपने पहचान की है कि खोज विफलता प्रतिकृति का उपयोग करके संभाला जा सकता है।

मास्टर विफलता थोड़ा और मुश्किल है। निम्नलिखित तार्किक सेटअप

+--------+  +--------+ 
| Slave | ... | Slave | 
+--------+  +--------+ 
    |    | 
    v (replicate) v 
+---------------------------+ 
|  Load balancer   | 
+---------------------------+ 
     /  \ 
     v   v 
+--------+  +--------+ 
| Master | ---> | Master | 
+--------+  +--------+ 

• तारीख तक मास्टर सूचकांक रखने के लिए repeater मोड इस्तेमाल किया जा सकता की तरह कुछ करने के लिए एक विचार है, जहां एक गर्म बैकअप मास्टर प्राथमिक गुरु से दोहरा सकते
• या तो
  • प्राथमिक मास्टर पर Ping हैंडलर जैसे कुछ जीवित अधिसूचना के रूप में उपयोग करें। यदि यह नहीं पहुंचा जा सकता है, तो एक छोटा प्रोग्रामेटिक घटक लिखें जो द्वितीयक मास्टर के डेटा आयात-हैंडलर को ट्रिगर करता है।
  • डेटा आयात हैंडलर को सभी मास्टर सर्वर पर सक्रिय रखें, जिससे उनमें से कोई भी अतिरिक्त कॉन्फ़िगरेशन के बिना ऑपरेशन करने की अनुमति देता है।

ध्यान दें कि आप लोड संतुलन ऐसी है कि एक गुलाम केवल समय में किसी भी बिंदु पर एक मास्टर से दोहराने कर सकते हैं विन्यस्त करने की जरूरत हो सकती है।

एक तरफ ध्यान दें, आपके कुछ अनुभवों को इस तरह के एक विशाल डेटा सेट को अनुक्रमणित करना दिलचस्प होगा।