מה חדש בטכנולוגיות ביג דאטה לשימושים צבאיים?
This post is also available in: 
English (אנגלית)
צמיחת התחום של שפע נתונים בזמן אמת ממספר רב של מקורות כמו מכשירים ניידים, האינטרנט, המדיה החברתית, חיישנים, קבצים וישומים, הובילה לפיתוח טכנולוגיות מתקדמות בתחום הביג דאטה גם למגוון יישומים צבאיים.
כשמדברים על טכנולוגיות ביג דאטה, הכוונה למערכות מחשוב מבוזרות, מערכות קבצים מבוזרות, מערכות לעיבוד מקביל מסיבי (MPP), וכריית נתונים המבוססת על מחשוב רשת וכו'.
טכניקות הביג דאטה המשמשות לעסקים כדי לכרות מאגרי נתונים מאומצות על ידי הצבא כדי להפיק יותר מידע ממקורות הנתונים השונים שלו – מרחפנים, דרך מערכות אבטחת סייבר אוטומטיות, מאגרי נתונים בתחום הטרור ועוד. הטכנולוגיה לא רק תסייע ללוחמים בשדה הקרב, אלא גם תשמש לשיפור בתחומים כמו פיתוח תוכנה ותחזוקת כלי רכב.
לפי defenseworld.net, תקציב מחלקת ההגנה האמריקאית לשנת הכספים 2017 כלל בקשה להשקעות במודיעין חישובי אוטומטי לתחומי הביולוגיה, סייבר, כלכלה, מדעי החברה ומודיעין צבאי.
על פי התקציב, דארפ"א (הסוכנות לפרויקטים מתקדמים בתחום ההגנה) מעריכה כי השקעתה בביג דאטה תעלה מכ-$216 מיליון בשנת הכספים 2015 לקרוב ל- $269 מיליון בשנת הכספים 2017, עליה מתוכננת בשיעור של 24.5%.
ב-2014 דארפ"א פרסמה תוכנית בשם כריה והבנה של מובלעות תוכנה (MUSE), שמטרתה לשפר את איכות התוכנה הצבאית. הסוכנות מבקשת לפתח חבילות תוכנה ב"קוד גדול" המסוגלות לנהל מידע בלי לעוות אותו ומבלי לקרוס תחת העומס של מערכי הנתונים הגדולים, הביג דאטה, שעמדו במרכז התכנון הטכנולוגי בממשל אובמה ב-2012.
יוזמות שונות של משרד ההגנה האמריקאי בתחום הביג דאטה כוללות מחקר של הסוכנות לצמצום איומים ביטחוניים DTRA ללכוד פתוגנים מסוכנים, תוכנית בהנהגת דארפ"א לכריית נתוני בריאות כדי לאתר תאים סרטניים, שילוב של כריית נתונים וניתוח פטנטים כדי לאתר "טכנולוגיות פורצות דרך" שעשויות לשנות את עתיד הציוד הצבאי והתכנון, ותוכניות לאיתור התפשטות הנשק להשמדה המונית על ידי אותה סוכנות לצמצום איומים ביטחוניים.
כמה מהאמצעים והטכנולוגיות בתחום הביג דאטה כוללים:
- OODT – טכנולוגיית הנתונים המוכוונת עצמים Apache, המיועדת ללא-מתכנתים ליצירה, עריכה, ניהול ואספקה של תזרימי עבודה ומשימות.
- Apache Bahir – משמש כמרכז לקונקטורים קיימים שהוקמו במסגרת Apache Spark, ומספק הרחבות/פלאג-אין נוספים למערכת מבוזרת אחרת, אחסון ומערכות לביצוע שאילתות.
- תחזוקת CBM – אנשי חיל האוויר האמריקאי, מדעני נתונים ואחרים רתמו את הכלים האנליטיים והכלים המתקדמים לטיפול בנתונים, הן בתחום התוכנה והן החומרה, כדי ליצור תזרימי עבודה, להגביר יעילות ופריון, לאתר ולנהל נכסים, ולהחליף אמצעי תחזוקה מבוססי לו"ז/זמן בתחזוקת CBM, תוך חסכון של $1.5 מיליון בשנה. באופן ספציפי, חיל האוויר העדיף להשתמש בפלטפורמת Aster של Teradata כדי לנהל בצורה טובה יותר תחזוקת טיסות, מאגרי מלאי ונתוני אחסון למטוסים.
- תוכנת Hadoop.
- ORCA – מנתח ארגוני, יחסים ואנשי קשר, תוכנה שפותחה על ידי האקדמיה של צבא ארה"ב, במקור במטרה ללשימוש במבצעים צבאיים כדי לזהות רשתות טרור וחתרנות, וכיום משתמשת באופן מקומי ליישומי הקרב העתידי, ובינתים משמשת את יחידות המשטרה ככלי בעל ערך וחינמי.
- Tableau – כלי יעיל ביותר לויזואליזציה של נתונים באופן אינטראקטיבי ומהיר, לשימוש מפתחים ולא-מפתחים כאחד.
- D3js – ספריית ג'אווהסקריפט המשמשת לוויזואליזציה של נתונים.
- Power BI – מאפשר למפתחים ליצור ויזואליזציה ונתוני תצוגה בדרך מדויקת ביותר שאינה זמינה במתקנים אחרים בתחום ה-BI.
- R language – שפה וסביבה להרצת חישובים סטטיסטיים והפקת גרפים של נתונים.
