Apache Airflow प्रोजेक्ट

इस पेज पर, तकनीकी लेखन वाले उस प्रोजेक्ट की जानकारी दी गई है जिसे Google Season of Docs के लिए स्वीकार किया गया है.

प्रोजेक्ट की खास जानकारी

ओपन सोर्स संगठन:

Apache Airflow

टेक्निकल राइटर:

kartik khare

प्रोजेक्ट का नाम:

वर्कफ़्लो कैसे बनाएं

प्रोजेक्ट की अवधि:

स्टैंडर्ड अवधि (तीन महीने)

प्रोजेक्ट का विवरण

मैं आसानी से और असरदार तरीके से नए वर्कफ़्लो बनाने का तरीका बताने वाला दस्तावेज़ बनाऊंगा. वर्कफ़्लो में ये चरण शामिल होते हैं -

1. पढ़ें
2. प्री-प्रोसेसिंग
3. प्रोसेस जारी है
4. प्रोसेसिंग के बाद
5. सेव करें/कार्रवाई
6. निगरानी

हर चरण में कई टास्क शामिल हो सकते हैं. इसके बाद, कई कार्रवाइयां की जा सकती हैं. जैसे, किसी स्टेज में दो या उससे ज़्यादा टास्क फ़ेल होने पर, उसे रद्द करना या कम से कम दो बार फ़ेल होने पर उसे फिर से चलाना.

वर्कफ़्लो के दूसरे हिस्से में, दो या उससे ज़्यादा जॉब को एक साथ चलाना और फिर अगले चरण के लिए उनके मिले-जुले नतीजे का इस्तेमाल करना शामिल है.

वर्कफ़्लो का एक और पहलू, मेल, स्लैक या पेजर ड्यूटी के ज़रिए कुछ भी गलत होने पर उपयोगकर्ता को सूचित करना है.

हम ऐसे कुछ आसान तरीके भी शामिल करने वाले हैं जिनमें वर्कफ़्लो का इस्तेमाल किया जा सकता है. जैसे, डाउनस्ट्रीम Kafka विषयों में किसी भी डेटा के मौजूद न होने पर, रीयल टाइम स्ट्रीमिंग जॉब को फिर से शुरू करना.

मैं मेंटॉर के साथ मिलकर, प्रोजेक्ट के काम को ज़्यादा बेहतर बनाने के लिए काम करूंगी. इसके बाद, इनके टास्क पूरे करूंगा.

आने वाले कुछ महीनों में, हमें बहुत कुछ करने को मिलेगा.