परियोजना का विवरण
अनुवादितवर्तमान में हमारी सभी एनालिटिक्स धीमी रात की बैच द्वारा गणना की जाती हैं, और सुबह जब नंबर डैशबोर्ड पर पहुंचते हैं, तो वे पहले से ही एक दिन पुराने होते हैं। हमें एपाचे काफ्का पर आधारित रीयल-टाइम इवेंट स्ट्रीम प्रोसेसिंग में जाना होगा: हमारे एप्लिकेशन और सेवाओं को जैसे ही इवेंट होते हैं, उन्हें प्रकाशित करना चाहिए, प्रोसेसिंग लेयर को स्ट्रीम को फ़िल्टर, समृद्ध और समेकित करना चाहिए, और परिणामों को सेकंड में स्टोरेज और डैशबोर्ड तक पहुंचाना चाहिए, घंटों में नहीं।
कार्य का दायरा एक पूर्ण विकसित कार्यशील पाइपलाइन है। हमें अपने इवेंट प्रकारों के लिए विषयों को डिजाइन करने की आवश्यकता है, मौजूदा एप्लिकेशनों में उत्पादकों को एकीकृत करना है, एक स्ट्रीम प्रोसेसिंग चरण स्थापित करना है जो स्ट्रीम को जोड़ता और समेकित करता है, और उपभोक्ताओं को लिखना है जो हमारे स्टोरेज में डेटा लिखते हैं और संचालन डैशबोर्ड पर लाइव मैट्रिक्स प्रदान करते हैं। विश्वसनीयता हमारे लिए गति के रूप में महत्वपूर्ण है: प्लेटफ़ॉर्म को ब्रोकर पुनरारंभ और ट्रैफ़िक स्पाइक्स को संदेश खोए बिना सहन करना चाहिए, स्पष्ट डिलीवरी गारंटी प्रदान करनी चाहिए और जब हम एक नया उपभोक्ता जोड़ते हैं या एक भ्रष्ट तालिका को पुनर्प्राप्त करते हैं, तो किसी भी बिंदु से इतिहास को पुनः चलाने की अनुमति देनी चाहिए।
हम एक इंजीनियर की तलाश कर रहे हैं जिसने उत्पादन में काफ्का का निर्माण और संचालन किया है, न कि केवल इसके साथ प्रयोग किया है। कृपया बताएं कि आप हमारे वॉल्यूम के लिए कौन सी विभाजन और स्टोरेज रणनीति का सुझाव देंगे, समय के साथ इवेंट स्कीमा परिवर्तनों को आप कैसे संभालेंगे और उपभोक्ता लैग और बैकप्रेशर की निगरानी कैसे व्यवस्थित करेंगे। हम इवेंट के उदाहरण, वर्तमान बैच लॉजिक और लोड परीक्षण के लिए एक परीक्षण वातावरण तक पहुंच प्रदान करेंगे।
कार्य का दायरा एक पूर्ण विकसित कार्यशील पाइपलाइन है। हमें अपने इवेंट प्रकारों के लिए विषयों को डिजाइन करने की आवश्यकता है, मौजूदा एप्लिकेशनों में उत्पादकों को एकीकृत करना है, एक स्ट्रीम प्रोसेसिंग चरण स्थापित करना है जो स्ट्रीम को जोड़ता और समेकित करता है, और उपभोक्ताओं को लिखना है जो हमारे स्टोरेज में डेटा लिखते हैं और संचालन डैशबोर्ड पर लाइव मैट्रिक्स प्रदान करते हैं। विश्वसनीयता हमारे लिए गति के रूप में महत्वपूर्ण है: प्लेटफ़ॉर्म को ब्रोकर पुनरारंभ और ट्रैफ़िक स्पाइक्स को संदेश खोए बिना सहन करना चाहिए, स्पष्ट डिलीवरी गारंटी प्रदान करनी चाहिए और जब हम एक नया उपभोक्ता जोड़ते हैं या एक भ्रष्ट तालिका को पुनर्प्राप्त करते हैं, तो किसी भी बिंदु से इतिहास को पुनः चलाने की अनुमति देनी चाहिए।
हम एक इंजीनियर की तलाश कर रहे हैं जिसने उत्पादन में काफ्का का निर्माण और संचालन किया है, न कि केवल इसके साथ प्रयोग किया है। कृपया बताएं कि आप हमारे वॉल्यूम के लिए कौन सी विभाजन और स्टोरेज रणनीति का सुझाव देंगे, समय के साथ इवेंट स्कीमा परिवर्तनों को आप कैसे संभालेंगे और उपभोक्ता लैग और बैकप्रेशर की निगरानी कैसे व्यवस्थित करेंगे। हम इवेंट के उदाहरण, वर्तमान बैच लॉजिक और लोड परीक्षण के लिए एक परीक्षण वातावरण तक पहुंच प्रदान करेंगे।
डिज़ाइन और मल्टीमीडिया नकद, बैंक ट्रांसफर
