הנדסת מערכות מידע נתוני עתק

לחץ כאן לכל השאלות

השימוש ב-combiners יכול להגביר את היעילות של תוכניות map/reduce מכיוון: 2019 מועד א' (גלעד)

1
done
by
מיין לפי
by Nati Mordakhay
Nati Mordakhay 0 נקודות · לפני חודש
מוניטין: 1
מטרת ה-Combiners היא צמצום כמו המידע המועברת בין ה-Mappers לבין ה-Reducers. שלב זה מתבצע לאחר של ה-Mapper: נבצע אגריגציה לכל הזוגות עם אותו מפתח למשל ונאחד אותם לזוג. כלומר, נבצע את פעולת האגריגציה ברמה הלוקאלית, ואז ה-Reducers יקבל מידע מצומצם ויבצע את פעולות האגריגציה שלו על דאטא שבחלקו כבר ''עובד'' ומתקבל משאר ה-Nodes. ה-Combiner עובד ברמת הפלט המקומי של Mapper יחיד, אין קשר לתלות ברשת או קירבה פיזית ולכן ד' לא נכון.
by

* השאלה נוספה בתאריך: 23-02-2025