המסע לאופטימיזציה בקנה מידה גדול

שם הארוע - Code Naturally: Data at Scale ■ מקום - משרדי Natural Intelligence, תל אביב ■ תאריך - 14.5.2019 ■ דוברים דניאל סאס - מוביל דאטה טכנולוגי; שרית נימן- מנהלת מוצרי דאטה ולמידת מכונה; עומרי פימה - ארכיטקט מידע

שתפו כתבה במיילשתפו כתבה במייל
שתפו כתבה במיילשתפו כתבה במייל
מפגש בנושא מוצר בהיי-טק
צילום: Natural Intelligence

במיטאפ שאירגנה חברת Natural Intelligence אליו הגיעו כ-50 איש, הרצו בכירי החברה בנושא סקיילינג.

לאחר שמיזם מפתח מוצר, הצעד הבא הוא לגדול, ועם הגדילה באים האתגרים של קנה המידה. החל מטיפול ברעש שמאט את העבודה, דרך הצורך בתשתית טכנולוגית שתתמוך בגודל ובמורכבות הגוברת. אז איך ניתן לבצע אופטימיזציה במהירות בד בבד עם המורכבות הגוברת של ביג-דאטה?

שרית נימן, מנהלת מוצרי דאטה ולמידת מכונה ועומרי פימה, ארכיטקט מידע בחברה, מסבירים את הרעיון ומשתפים בדוגמות ועצות מניסיונם בחברה. בין השאר, מדברים שרית ועומרי על קניית מדיה, תשתית דאטה, פרוסונליזציה ובדיקות A/B.

קרדיט: Natural Intelligence

ההרצאה השנייה, עסקה בדאטה-לייק מעל שירותי הענן של אמזון והנגשה של מידע לאנליסטים ישירות מS3 דרך Reshift Sprectrum. היום, יותר מתמיד, נהיה קל לבנות את הדאטה לייק הפרטי שלך. רק אסוף את הדאטה מכל מיני מקורות, זרוק אותו באחסון בענן וחכה שהלקוחות שלך יבנו מעל הדאטא אי.טי.אל-ים. למעשה, זה לא כזה פשוט. אולי להביא את הדאטה הבסיסי זה פשוט, אבל לדאוג שהוא יהיה נגיש, אמין ויציב מתחיל להיות מאתגר. בהרצאה זו דניאל, מוביל דאטה טכנולוגי, יציג איך בנו בחברה את הדאטה-לייק בעזרת טכנולוגיות ענן של אמזון: S3, EMR ו Reshift Sprectrum ו-Glue. נראה את הכח שלהם ואיך התמודדו בחברה עם החוסרים שלהם במיקוד בנושא הנגשת מידע היררכי מורכב כמידע טבלאי לאנלסטים מS3 בעזרת Reshift Sprectrum וGlue.

קרדיט: Natural Intelligence

כתבות מומלצות

עובדי בניין מסייעים בהכוונת התנועה במנהטן, ניו יורק, בתחילת החודש

האם הראלי בשווקים מסמן את התחתית — או שהגרוע מכל עוד לפנינו?

מבט משטח המריבה אל הים. כל דונם שווה מיליונים, ומחירי הבתים בסביבה מגיעים לעשרות מיליוני שקלים

"פתאום הבנו שיש בעיות עם הקיבוץ": השקיעו 30 מיליון שקל בשכונה חדשה ליד שפיים, אבל אז הכל השתבש

אם אחת הסיבות לתוספות השכר המתכוננות למגזר הציבורי היא העלייה החדה בשכר בהיי־טק, הגיע הרגע להכניס להסכמי השכר במגזר הציבורי עוד אלמנטים היי־טקיים

העובדים שהמשכורות שלהם זינקו - ומה אפשר ללמוד מהסכמי השכר בהיי-טק

סופיה, בירת בולגריה. לגור באחת הערים העתיקות באירופה עבור 3,200 שקל בחודש

עשר ערים בעולם שאפשר לחיות בהן בפחות מ-4,000 שקל בחודש – כולל שכר דירה

תגובות

הזינו שם שיוצג באתר
משלוח תגובה מהווה הסכמה לתנאי השימוש של אתר TheMarker

כתבות שאולי פספסתם

אישה בטלפון

מטעינים את הטלפון כשהסוללה כמעט גמורה? תשכחו מהלוואה

שיעור באוניברסיטה. באקדמיה מצופה מהסטודנטים להתמודד עם בעיות שלא ראו קודם

הסטודנטים באקדמיה נדרשים לראשונה לחשיבה מעמיקה - והתוצאות עגומות