Key points are not available for this paper at this time.
हाल के वर्षों में, ByteDance में, हम अधिक से अधिक व्यावसायिक परिदृश्यों को देखते हैं जिन्हें ताज़ा आयातित डेटा पर जटिल विश्लेषण करने की आवश्यकता होती है, साथ ही लेनदेन समर्थन और मजबूत डेटा संगति की आवश्यकता होती है। इस पेपर में, हम ByteHTAP बनाने की अपनी यात्रा का वर्णन करते हैं, जो उच्च डेटा ताजगी और मजबूत डेटा संगति के साथ एक HTAP प्रणाली है। यह एक अलग इंजन और साझा भंडारण आर्किटेक्चर को अपनाता है। इसका मॉड्यूलर सिस्टम डिज़ाइन पूरी तरह से ByteDance के मौजूदा OLTP सिस्टम और एक ओपन-सोर्स OLAP सिस्टम का उपयोग करता है। यह विकल्प हमें बहुत सारे संसाधनों और विकास के समय की बचत करता है और भविष्य में अन्य विकल्पों के साथ क्वेरी प्रसंस्करण इंजन को बदलने जैसे विकल्पों की अनुमति देता है। ByteHTAP एक सेकंड से कम की देरी के साथ उच्च डेटा ताजगी प्रदान कर सकता है, जो हमारे ग्राहकों के लिए कई नए व्यावसायिक अवसरों को सक्षम करता है। ग्राहक अपनी व्यावसायिक आवश्यकताओं के अनुसार विभिन्न डेटा ताजगी थ्रेशोल्ड को भी कॉन्फ़िगर कर सकते हैं। ByteHTAP अपने OLTP और OLAP सिस्टम के बीच वैश्विक टाइमस्टैम्प के माध्यम से मजबूत डेटा संगति भी प्रदान करता है, जो एप्लिकेशन डेवलपर्स को जटिल डेटा संगति मुद्दों को अपने आप संभालने से बहुत राहत देता है। इसके अतिरिक्त, हम ByteHTAP के लिए कुछ महत्वपूर्ण प्रदर्शन ऑप्टिमाइज़ेशन पेश करते हैं, जैसे स्टोरेज लेयर में गणनाओं को धकेलना और deletes को कुशलतापूर्वक संभालने के लिए डिलीट बिटमैप का उपयोग करना। अंत में, हम उत्पादन में ByteHTAP का विकास और संचालन करने के अनुभव और सर्वोत्तम प्रथाओं को साझा करेंगे।
Chen et al. (Mon,) ने इस प्रश्न का अध्ययन किया।