Hadoop Ecosystem

מְחַבֵּר: Roger Morrison
תאריך הבריאה: 18 סֶפּטֶמבֶּר 2021
תאריך עדכון: 19 יוני 2024
Anonim
Hadoop Ecosystem Explained | Hadoop Ecosystem Architecture And Components | Hadoop | Simplilearn
וִידֵאוֹ: Hadoop Ecosystem Explained | Hadoop Ecosystem Architecture And Components | Hadoop | Simplilearn

תוֹכֶן

הגדרה - מה המשמעות של Hadoop Ecosystem?

המערכת האקולוגית של Hadoop מתייחסת למרכיבים השונים בספריית התוכנה של Apache Hadoop, כמו גם לאביזרים וכלים שמספקת קרן Apache Software עבור פרויקטים אלה של תוכנות, ולדרכים בהן הם עובדים יחד.


Hadoop היא מסגרת מבוססת Java הפופולרית ביותר לטיפול וניתוח קבוצות נתונים גדולות.

מבוא ל- Microsoft Azure ו- Microsoft Cloud | במהלך מדריך זה תוכלו ללמוד על אודות מיחשוב ענן וכיצד Microsoft Azure יכולה לעזור לכם להעביר ולנהל את העסק שלכם מהענן.

Techopedia מסביר את Hadoop Ecosystem

גם חבילת הליבה של Hadoop וגם האביזרים שלה הם לרוב פרויקטים עם קוד פתוח ברישיון של אפאצ'י. הרעיון של מערכת אקולוגית של Hadoop כרוך בשימוש בחלקים שונים במערך הליבה של Hadoop כמו MapReduce, מסגרת לטיפול בכמויות עצומות של נתונים, ומערכת הקבצים המופצת Hadoop (HDFS), מערכת טיפול קבצים מתוחכמת. יש גם YARN, מנהל משאבים של Hadoop.

בנוסף לאלמנטים מרכזיים אלה של Hadoop, אפאצ'ה סיפקה גם אביזרים או כלים משלימים למפתחים מסוגים אחרים. אלה כוללים Apache Hive, כלי לניתוח נתונים; Apache Spark, מנוע כללי לעיבוד נתונים גדולים; Apache Pig, שפת זרימת נתונים; HBase, כלי מסד נתונים; וגם אמברל, שיכולה להיחשב כמנהל מערכות אקולוגיות של Hadoop, מכיוון שהיא מסייעת לנהל את השימוש במשאבי Apache השונים הללו יחד. כאשר Hadoop הופך להיות הסטנדרט דה-פקטו לאיסוף נתונים והופך בכל מקום בארגונים רבים, מנהלים ומובילי פיתוח לומדים הכל על המערכת האקולוגית של Hadoop ואילו סוגים של דברים מעורבים במערך כללי של Hadoop.