HBase
 sql >> डेटाबेस >  >> NoSQL >> HBase

सीडीपी में परिचालन डेटाबेस

संपादक का नोट, अगस्त 2020:सीडीपी डेटा सेंटर को अब सीडीपी प्राइवेट क्लाउड बेस कहा जाता है। आप इसके बारे में यहां और जान सकते हैं।

CDP में Cloudera का ऑपरेशनल डेटाबेस (OpDB) एक वास्तविक समय, हमेशा उपलब्ध, स्केलेबल OpDB प्रदान करता है जो एक एकीकृत ऑपरेशनल और वेयरहाउसिंग प्लेटफॉर्म के भीतर नए असंरचित डेटा के साथ पारंपरिक संरचित डेटा प्रदान करता है। Cloudera एक परिचालन डेटाबेस प्रदान करता है जो एक एकीकृत ओपन-सोर्स प्लेटफॉर्म के भीतर नए असंरचित डेटा के साथ पारंपरिक संरचित डेटा प्रदान करता है।

परिचालन डेटाबेस आपको निम्न में मदद करता है:

स्वास्थ्य सेवा, सार्वजनिक उपयोगिताओं आदि जैसे क्षेत्रों में क्रांति लाने के लिए मशीन लर्निंग/कृत्रिम बुद्धिमत्ता का संचालन करें। 

  • वेबस्केल पर रीयल-टाइम सामग्री परोसें।
  • परिचालन और ऑफ़लाइन उपयोग के लिए बड़े डेटा विश्लेषण को सशक्त बनाएं।
  • रिकॉर्ड के लचीले स्टोर के रूप में उपयोग करें।

सीडीपी में ओपीडीबी वर्तमान में दो रूपों में उपलब्ध है:सीडीपी पब्लिक क्लाउड में पूरी तरह से सुरक्षित, अर्ध-प्रबंधित पेशकश के रूप में - डेटा हब, और सीडीपी डेटा सेंटर में पूरी तरह से अनुकूलन योग्य पेशकश के रूप में - जो कि सीडीएच और एचडीपी में पहले से उपलब्ध है। आप अपनी परिनियोजन रणनीति और ओपीडीबी जरूरतों के आधार पर एक फॉर्म फैक्टर चुन सकते हैं। ऑपरेशनल डेटाबेस Apache HBase के लिए एक स्टोरेज लेयर के रूप में Amazon S3 जैसे ऑब्जेक्ट स्टोर का उपयोग करता है, जहां HFiles ऑब्जेक्ट स्टोर पर लिखे जाते हैं, लेकिन WALs HDFS को लिखे जाते हैं।

सीडीपी में परिचालन डेटाबेस में निम्नलिखित घटक होते हैं:

  • अपाचे फीनिक्स एक एसक्यूएल इंटरफेस है जो अपाचे एचबेस के शीर्ष पर चलता है।
  • Apache HBase को बड़े पैमाने पर मापनीयता के लिए डिज़ाइन किया गया है, इसलिए आप एक ही प्लेटफॉर्म में असीमित मात्रा में डेटा स्टोर कर सकते हैं और डेटा की सेवा की बढ़ती मांगों को संभाल सकते हैं।
  • अपाचे ज़ूकीपर एक वितरित कॉन्फ़िगरेशन सेवा, एक सिंक्रनाइज़ेशन सेवा और एक नामकरण रजिस्ट्री प्रदान करता है।
  • अपाचे नॉक्स गेटवे परिधि सुरक्षा प्रदान करता है ताकि उद्यम आत्मविश्वास से नए उपयोगकर्ताओं तक पहुंच बढ़ा सके।
  • Apache HDFS का उपयोग Apache HBase WALs को लिखने के लिए किया जाता है।
  • Amazon S3 और Microsoft ADLS Gen2 जैसे ऑब्जेक्ट स्टोर का उपयोग Apache HBase HFiles को स्टोर करने के लिए किया जाता है।
  • साझा डेटा अनुभव (SDX) का उपयोग सुरक्षा और शासन क्षमताओं के लिए किया जाता है। सुरक्षा और शासन नीतियां एक बार सेट की जाती हैं और सभी डेटा और कार्यभार पर लागू होती हैं।
  • IDBroker एक REST API है जिसे Apache Knox की प्रमाणीकरण सेवाओं के हिस्से के रूप में बनाया गया है। यह एक प्रमाणित और अधिकृत उपयोगकर्ता को क्लाउड विक्रेता एक्सेस टोकन के लिए क्रेडेंशियल्स या टोकन के एक सेट का आदान-प्रदान करने की अनुमति देता है।

सीडीपी सीरीज में ऑपरेशनल डेटाबेस 

इस लेख ने आपको सीडीपी और इसकी वास्तुकला पर ओपीडीबी के बारे में एक परिचय दिया है। आप ओपीडीबी के प्रत्येक पहलू के बारे में अधिक जान सकते हैं, और इस श्रृंखला के आगामी लेखों में ओपीडीबी की नई विशेषताओं और क्षमताओं के बारे में पता लगा सकते हैं। जैसे ही वे प्रकाशित होंगे हम प्रत्येक ब्लॉग पोस्ट के लिंक अपडेट करेंगे।

पहुंच-योग्यता

क्लौडेरा का ओपीडीबी सुनिश्चित करता है कि उपयोगकर्ता संग्रहीत डेटा तक पहुंच या पुनर्प्राप्त कर सकते हैं। यह ऑटो-शार्डिंग और पूर्व-परिभाषित शार्डिंग, तीन क्वेरी इंजन और कई डेटा एकीकरण टूल दोनों का समर्थन करता है। यह आलेख इन क्षमताओं और अन्य सुविधाओं का एक सिंहावलोकन प्रदान करता है जो सुनिश्चित करता है कि उच्च स्तर की पहुंच प्राप्त हो।

प्रशासन

Cloudera का OpDB आपके OpDB कार्यभार को प्रबंधित करने के लिए कई प्रशासन उपकरण और सुविधाएँ प्रदान करता है। प्रशासक ओपीडीबी को सीडीपी पब्लिक क्लाउड - डेटा हब में पूरी तरह से सुरक्षित, अर्ध-प्रबंधित पेशकश के रूप में और सीडीपी डेटा सेंटर में पूरी तरह से अनुकूलन योग्य पेशकश के रूप में तैनात कर सकते हैं (सीडीएच और एचडीपी में उपलब्ध के समान)। यह लेख आपको एक उच्च-स्तरीय अवलोकन प्रदान करता है कि सीडीपी में ओपीडीबी को प्रशासित करने के लिए कौन सी सुविधाएँ और उपकरण समर्थित हैं।

प्रबंधन

Cloudera का OpDB प्रबंधन उपकरण प्रदान करता है जो आपके OpDB कार्यभार को प्रभावी ढंग से प्रबंधित करने में आपकी सहायता करता है। यह लेख आपको सीडीपी में ओपीडीबी प्रबंधन टूल और सुविधाओं का अवलोकन देता है।

उपलब्धता

क्लौडेरा का ओपीडीबी डेटा उपलब्धता के उच्च स्तर को बनाए रखता है, यह सुनिश्चित करता है कि आवश्यक डेटा जब और जहां जरूरत हो, तब भी पहुंच योग्य हो, भले ही नोड विफलता हो। यह आलेख उन सुविधाओं का अवलोकन प्रदान करता है जो उच्च स्तर की उपलब्धता को संभव बनाती हैं, जैसे कि लीक से हटकर उच्च उपलब्धता, डेटा प्रतिकृति और त्रुटि सुरक्षा।

ईमानदारी

Cloudera का OpDB इकाई और डोमेन अखंडता, ACID लेनदेन और गैर-संबंधपरक अखंडता सहित विभिन्न डेटा अखंडता क्षमताएं प्रदान करता है। यह आलेख OpDB डेटा अखंडता क्षमताओं का एक सिंहावलोकन प्रदान करता है।

आवेदन सहायता

क्लौडेरा का ओपीडीबी विभिन्न लोकप्रिय भाषाओं, ढांचे और अनुप्रयोगों का समर्थन करता है जिनका उपयोग आप अपने ओपीडीबी में संग्रहीत डेटा तक पहुंचने के लिए कर सकते हैं। यह लेख आपको समर्थित भाषाओं, रूपरेखाओं और अनुप्रयोगों का अवलोकन देता है।

NoSQL और संबंधित क्षमताएं

चूंकि Cloudera के OpDB में डेटा संग्रहीत करने के लिए NoSQL डेटाबेस HBase शामिल है, इसमें NoSQL क्षमताएं हैं, जैसे कि प्रमुख मान, तालिका-शैली क्षमताएं और लचीले डेटा प्रकार। HDFS, स्पार्क और काफ्का सहित Hadoop पारिस्थितिकी तंत्र में सख्त एकीकरण भी प्रदान किया गया है। यह आलेख इन क्षमताओं का एक सिंहावलोकन प्रदान करता है।

मापनीयता

Cloudera का OpDB उच्च मापनीयता के लिए डिज़ाइन किया गया है, जो लचीले डेटा प्रकार के साथ लंबवत और क्षैतिज दोनों मापनीयता का समर्थन करता है और डेटा आकार की कोई सीमा नहीं है। यह आलेख समर्थित मापनीयता संबंधी सुविधाओं और उपकरणों का एक सिंहावलोकन प्रदान करता है।

सुरक्षा

क्लाउडेरा का ओपीडीबी एन्क्रिप्शन, प्रमाणीकरण, प्राधिकरण और ऑडिट के संबंध में विभिन्न स्तरों पर कई सुरक्षा समाधान प्रदान करता है। यह लेख इन सुरक्षा-संबंधी सुविधाओं और उपकरणों का अवलोकन प्रदान करता है।

अधिक जानकारी के लिए, कृपया यहां जाएं:ऑपरेशनल डेटाबेस के साथ शुरुआत करना।


  1. Redis
  2.   
  3. MongoDB
  4.   
  5. Memcached
  6.   
  7. HBase
  8.   
  9. CouchDB
  1. स्पार्क-ऑन-एचबेस:डेटाफ्रेम आधारित एचबीएएस कनेक्टर

  2. Apache Hadoop आर्किटेक्चर - HDFS, YARN और MapReduce

  3. पेश है Apache HBase मीडियम ऑब्जेक्ट स्टोरेज (MOB) कॉम्पैक्शन पार्टीशन पॉलिसी

  4. HBase znodes क्या हैं?

  5. Hadoop MapReduce में सट्टा निष्पादन