האתגרים הבאים בתחום הביג דאטה
This post is also available in: 
English (אנגלית)
עולם הביג דאטה מתפתח במהירות ומתמודד עם אתגרים חדשים. מעבדת מחקר שנפתחה לאחרונה באוניברסיטת קליפורניה בברקלי, RISELab, עוסקת במערכות המספקות מודיעין בזמן-אמת עם באופן מאובטח. מעבדת המחשבים החדשה, שירשה את מקומה של ה-AMPLab הידועה, חותרת "להגיע מעבר לאנליטיקה של ביג דאטה לעולם אימרסיבי יותר, בו חיישנים נמצאים בכל מקום, הבינה המלאכותית היא מוחשית, והעולם ניתן לתכנות".
אחת הדוגמאות המובאות על ידי infoworld.com – ניהול תשתית דאטה סביב כלי טיס אוטונומיים קטנים, בהם יש לעבד את הנתונים במהירות גבוהה ובאופן בטוח.
אחד האתגרים הוא האבטחה, אולם לא מדובר בנושא המוכר של בקרת גישה, אלא בתפיסות כמו "הצפנה הומומורפית", כאשר ניתן לעבוד עם נתונים מוצפנים ללא צורך לפענח אותם קודם.
פרופ' ג'וזף הלרסטיין, מומחה ותיק למערכות מאגרי נתונים והחוקר הראשי במעבדה, מתאר את השינוי שחל במגמות הטכנולוגיה. "לפני 10 שנים חלה האצה עצומה בכמות הנתונים כתוצאה מהביג דאטה והלמידה החישובית הפרקטית. כיום אנו נמצאים בעיצומו של הלם הקומודיטיזציה (הפיכת מוצר יקר ערך לסחורה בסיסית), עם השגשוג של המכשירים מבוססי דאטה.
מיליארדי חיישנים מחוברים – בטלפונים חכמים, מצלמות, מכוניות ובניינים – מפעילים את העולם סביבנו. אנו עדים לצמיחה מהירה של מכשירים הניתנים לתכנות שמסוגלים לפעול. האתגר הגדול הבא במחשוב מבוסס-דאטהיהיה לסגור את הלולאה בין החישה לבין הפעולה, באמצעות פלטפורמות חדשות המיועדות לקבלת החלטות חכמה בזמן אמת", על פי האתר של ברקלי.
כמה פרויקטים כבר החלו להיחקר במעבדה החדשה, אחד מהם הוא ה-Ground, מערכת ניהול הקשר עבור אגמי דאטה. הוא מספק מנגנון, "המאפשר למשתמשים לדעת איזה נתונים יש להם, לאן הם זורמים ומאיפה, מי משתמש בנתונים, מתי הם משתנים וכיצד זה קורה".
צבירת דאטה עברה ממאגרים נוקשים לעבר "אגמי דאטה פתוחים וגמישים מאוד", אולם דבר זה מקשה "לאתר למה הפכו הנתונים". במובנים מסוימים, אומר הלרסטיין, הידיעה מי שינה סט נתונים מסוים ומה היה השינוי עשויים להיות חשובים יותר מהנתונים עצמם. ה-Ground מספק API משותף ומטה-מודל לאיתור מידע כזה, והוא מסוגל לפעול עם מאגרי נתונים רבים.
תוכלו ללמוד על אגמי דאטה ועל היבטים רבים נוספים בתחום הביג דאטה בהקשר של ביטחון המולדת בכנס והתערוכה הקרובים "היתוך מידע – ביג דאטה", שמארגנת חברת iHLS. הכנס יתקיים במתחם הכנסים לאגו, ראשון לציון, ב-13 בפברואר, 2017, והוא יארח כמה מהמומחים המובילים בנושא ויציג טכנולוגיות מהשורה הראשונה.
