כיצד להעריך מועמדים להנדסה בכירה באופן אובייקטיבי על תכנון ארכיטקטורת מערכת ברמה גבוהה במהלך הגיוס

שני מועמדים מקבלים את אותה הנחיה: לעצב שירות המאפשר למשתמשים לשתף סרטוני וידאו קצרים. הראשונה משרטטת דיאגרמה נקייה תוך עשר דקות, מציינת כל רכיב פופולרי ומדברת בביטחון מוחלט. השנייה מתחילה לאט יותר, שואלת מי המשתמשים, אומרת באיזה חלק היא לא בטוחה ובוחרת בחירה שונה לאחסון, תוך מתן סיבה ברורה. מראיינת א' מדרגת את המועמד הראשון כ"חזק". מראיינת ב', שישבה באותו מפגש, מדרגת את השני כ"חזק". ההערות שלהם בקושי חופפות.

זהו תרחיש להמחשה, לא אירוע גיוס מתועד. זהו תרחיש נפוץ מספיק כדי שרוב צוותי ההנדסה יזהו אותו. שני העיצובים היו ניתנים להגנה. מה שהיה שונה היה מה כל מראיין נתן לציון: שטף, מהירות, היכרות עם הארכיטקטורה המועדפת עליו, או איכות ההנמקה. מדריך זה מיועד למנהלי הנדסה ומובילי הנדסה הזקוקים לרובריק ראיון לעיצוב מערכת שמדרג מועמדים בכירים על סמך אותן ראיות, כך ששני מראיינים יוכלו להגיע לאותה מסקנה מאותן סיבות. כל קריטריון להלן צריך לעבור אימות על ידי מהנדס בכיר ולבחון לצורך הגינות לפני השימוש בו בהחלטת גיוס אמיתית.

מהי רובריקה לראיון עיצוב מערכת?

רובריקה לראיון תכנון מערכתית היא מדריך ניקוד המפרט את מה שאתם מחפשים, איך נראה כל ציון בהתנהגות נצפית, ואילו טעויות לא ניתן לקזז על ידי חוזקות במקום אחר. הוא ממוקם ליד השאלה, כך שכל מראיין אוסף ראיות על פי אותם קריטריונים. המדריך של גוגל לראיונות מובנים מכנה את כלי הניקוד הללו "רובריקות" ומציין שחוקרים מכנים אותם "סולמות דירוג מעוגנים התנהגותית". הוא מדווח שראיונות מובנים נותנים תוקף ניבוי גבוה יותר והבדלים קטנים יותר בין קבוצות דמוגרפיות, וכי שאלות, מדריכים ורובריקות מוכנות מראש חוסכות בממוצע 40 דקות לראיון. אתם יכולים לקרוא את ההנחיות המלאות ב- Google re:Work: מדריך לראיונות מובנים.

דוגמאות פומביות קלות למציאה, ורובן נכתבו עבור מועמדים. מדריך זה מיועד לצד השני של השולחן.

עובדות מהירות

1. הגדירו את הביצועים שאתם מעריכים

התחילו בעבודה, לא בנושא. עבור מהנדס בכיר, המשימה הרלוונטית היא בדרך כלל: בהינתן בעיה מעורפלת, קבלו והגנו על החלטות אדריכליות, וציינו מה ישנה אותן. כתבו זאת כמשפט אחד, וציינו את התפקיד, הרמה וההקשר שבו האדם יעבוד. לתפקיד בכיר בתחום ה-backend בחברת תשלומים יש דרישות שונות מתפקיד בכיר בתחום הפלטפורמה בחברת מדיה.

כתבו גם מה אתם לא מעריכים. מהירות הקלדה, היכרות עם ספק ענן מסוים ויכולת לצייר בצורה מסודרת על לוח לבן משותף הם קריטריונים מקריים נפוצים. אם הם אינם חלק מהעבודה, הם לא צריכים להזיז את הציון.

2. בחרו משימה מייצגת ולא מוכרת

בחרו בעיה שמדגימה את העבודה האמיתית ושמועמדים לא יכלו לשנן. הנחיה מוכרת ("עצבו קיצור כתובת URL") מתגמלת חזרה. השתמשו בבעיה מהתחום שלכם ללא הפרטים הרגישים, ובקשו ממהנדס בכיר לפתור אותה באופן עצמאי כדי שתדעו איך נראה טווח סביר של תשובות.

קבלו את העובדה שבעיה אחת של 45 דקות מדגימה רק חלק ממה שמהנדס בכיר עושה. היא יכולה להראות כיצד מישהו מתמודד עם עמימות, אילוצים ופשרות. היא לא יכולה להראות כיצד הוא מנחה, מנהל הגירה במשך חודשים או מטפל באירוע ארוך טווח. ציינו זאת במסמכי הגיוס שלכם כדי שאף אחד לא יקרא יתר על המידה את הציון.

3. כתבו קריטריונים ועוגנים נצפים

בנו קריטריונים סביב ראיות שתוכלו לרשום. סט קצר ובר-ביצוע לסבב תכנון מערכת בכירה:

דרג כל קריטריון מ-0 עד 2: 0 הוא חסר או לא נתמך, 1 הוא חלקי עם השמטות רלוונטיות, ו-2 הוא שלם ומוצדק מול הקריטריונים המוסכמים. העוגנים חשובים יותר מקנה המידה. לצורך הנמקת פשרות, לדוגמה, 0 הוא "מציין טכנולוגיה מבלי לציין מדוע", 1 הוא "נותן סיבה אך לא את עלות החלופה", ו-2 הוא "משווה אפשרויות מול האילוצים המוצהרים ואומר על מה הן היו מוותרות".

הגדירו שגיאות קריטיות בנפרד, כגון התעלמות מדרישת הגנת מידע שהראיין הצהיר או הצעת עיצוב שאינו עומד באילוץ נוקשה שהוגדר. ציון ממוצע לעולם לא חייב להסתיר שגיאה קריטית. הימנעו ממתן ציון על ביטחון או מהירות; מועמד שקט שמסיק היגיון זהיר לא צריך להיענש על סגנונו. המדריך שלנו להערכת שיקול דעת ופתרון בעיות מכסה כיצד לכתוב קריטריונים למשימות הנמקה.

4. כיול מעריכים והפעלת פיילוט

רובריקה ששני אנשים קוראים בצורה שונה עדיין אינה רובריקה. לפני שאתם משתמשים בה בשידור חי:

1. בחר דוגמה. השתמשו בעיצוב כתוב של עמית שאינו בתהליך הגיוס, או בהקלטה של ​​ראיון מדומה בהסכמת האדם.
2. ציון באופן עצמאי. כל מעריך כותב את הראיות עבור כל קריטריון לפני שהוא רואה את הציונים של כל אחד אחר.
3. השווה ראיות. כאשר הציונים שונים ביותר מנקודה אחת, יש לברר האם העוגן היה דו משמעי או שהמעריכים שמו לב לדברים שונים. כתבו מחדש את העוגן.
4. חזור על הפעולה בדוגמה שנייה. הפסיקו כשמחלוקות עוסקות בשיפוט, לא בניסוח.

המדריך של גוגל משלב הכשרה של מראיינים עם כיול, כך שהמראיינים יהיו עקביים ובטוחים בהערכות שלהם, וזה אותו רעיון. בקשו ממומחה, כמו מנהל הנדסה מצוות סמוך, לבדוק את המקרה ואת המנחים, ובקשו מצוות האנשים שלכם לבדוק את התהליך לצורך הגינות ודרישות משפטיות באזורי הגיוס שלכם.

5. עבדו על דוגמה מציאותית

לדוגמה. מהנדס בכיר צריך לאמת את המקרה ולענות על קריטריונים לפני השימוש.

המקרה. מועמדים מעצבים שירות התראות עבור אפליקציית משלוחים: לקוחות מקבלים עדכונים כאשר סטטוס הזמנה משתנה. קנה המידה מתואר רק כ"כמה מיליוני הזמנות ביום, בעיקר בזמני הארוחות".

ניסיון ראשון. "הייתי שם תור הודעות בין שירות ההזמנות לעובד הודעות, מאחסן כל אירוע במסד נתונים ושולח הודעות דחיפה." המבנה סביר, אך המועמד לא שאל אילו ערוצים נדרשים, מה קורה אם הודעה מאחרת או נשלחת פעמיים, או מה המשמעות של עומס שיא עבור התור.

משוב מהמראיין וניסיון חוזר. המראיין שואל, "מה גרוע יותר: הודעה מאוחרת או הודעה כפולה?" על המראיינים לקבל מעקב סטנדרטי עבור כל קריטריון, כך שכל מועמד יקבל את אותה הזדמנות להראות את המיומנות.

ניסיון חזק יותר. "כפילות גרועות יותר בדחיפה, כי אנשים יפסיקו לסמוך על האפליקציה, אז הייתי הופך את השליחה לאידמפוטנטית עם מפתח הזמנה וסטטוס. עבור SMS הייתי מקבל כפילויות מזדמנות כי העלות חשובה יותר. עומס שיא בזמני הארוחות פירושו שהתור צריך לספוג פרצים ועובדים צריכים להתאים את עומק התור. אני לא בטוח עד כמה ההבטחה לזמן אספקה ​​מחמירה, אז הייתי שואל את בעל המוצר לפני שאני בוחר בין מדיניות פשוטה של ​​ניסיון חוזר לבין נתיב עדיפות לעדכונים קריטיים בזמן."

ניקוד. ביחס לרובריקה, תשובה זו נותנת ציון 2 על הנמקת פשרות (שתי אפשרויות, עלויות, סיבה), 2 על ניסוח הבעיה (ציון הנחות, שאילת שאלה), ו-1 על התמודדות עם שינוי עד שהמראיין מוסיף אילוץ. שימו לב שהמראיין נותן ניקוד לראיות, ולא מתאים את העיצוב של המועמד לעיצוב המועדף עליו.

היכן שהעברת מידע אינטראקטיבית עוזרת

המיומנות שאתם בונים כאן מיועדת למראיינים, ותרגול אינטראקטיבי מתאים לכך. בפגישת כיול חיה, הציגו את עיצוב הדוגמה, בקשו מכל מעריך לתת ציון לכל קריטריון באופן פרטי, וחשפו את הפער לפני הדיון. אנשים מתחייבים לציון לפני שהם שומעים את הקול הכי חזק בחדר, וחילוקי הדעות מצביעים על העוגנים שצריך לכתוב מחדש. אותה דוגמה ורובריקה יכולים לפעול בקצב עצמי עבור מראיינים חדשים שמצטרפים מאוחר יותר, עם מפגש חי כדי לדון במקרים מעורפלים. AhaSlides תומך בלמידה אינטראקטיבית ובמעבר בין מסירה חיה לקצב עצמי. זהו כלי מצגת ולמידה, לא פלטפורמת ראיונות או מערכת מעקב אחר מועמדים, לכן שמרו נתוני מועמדים אמיתיים בכלי הגיוס שלכם. בדקו כל פונקציית כתיבה, משוב או דיווח ספציפית שאתם מתכננים להסתמך עליה מול זרימת העבודה שלכם. לקבלת עזרה בבחירת פורמטים, עיינו במדריך שלנו מתי להשתמש בלמידה אדפטיבית, אינטראקטיבית וחיה , ולעיצוב משוב עיינו בעיצוב תרגול אינטראקטיבי עם משוב שימושי.

מדוד מה השתנה

החליטו מראש מה יראה שהרובריקה עובדת. שני מדדים הם פרקטיים. ראשית, הסכמה: האם על פי אותו עיצוב מוקלט או כתוב, מראיינים עצמאיים נוחתים קרוב יותר זה לזה לאחר הכיול מאשר קודם? הגדירו מי נכלל, את המכנה ואת התזמון. שנית, רלוונטיות: לאחר מספר חודשים, האם הציונים קשורים לביצועי עובדים חדשים בסקירות עיצוב? עם מספר קטן של עובדים זה יהיה איתות גס בלבד, לכן התייחסו לזה כהנחיה לסקירת הרובריקה, לא כהוכחה. אם התוצאות משתפרות, בדקו מה עוד השתנה באותו הזמן, כגון הגדרת תפקיד חדשה או ערוץ מקורות שונה, לפני מתן קרדיט לרובריקה.

אילוצים שעשויים להישאר

• ייצוגיות. בעיה אחת מדגימה חלק מהעבודה. שלבו אותה עם ראיות אחרות כגון דוגמת עבודה או שיחה מובנית על החלטות קודמות.
• הֲגִינוּת. רובריקה מפחיתה שונות, אך היא אינה מסירה הטיה בפני עצמה. סקור את המקרה ואת העוגנים כדי לוודא הנחות לגבי רקע, ובדקו את התוצאות בין הקבוצות עם צוות האנשים שלכם.
• זמן המראיין. כיול לוקח שעות. בלעדיו, הרובריקה היא פשוט צורה ארוכה יותר.
• בהירות תפקידים. אם הצוות לא מסכים מה המשמעות של "בכיר", שום רובריקה לא תפתור את העניין.
• הקשר משפטי. הערכת גיוס מוסדרת בצורה שונה במקומות שונים. יש לבדוק את הדרישות המקומיות לפני שינוי תהליך.

שאלות נפוצות

מה צריכה לכלול רובריק בראיון לעיצוב מערכת?

שלושה עד חמישה קריטריונים כגון מסגור הבעיה, הנמקת פשרות, עומק, טיפול בשינוי ותקשורת, ציון מעוגן של 0 עד 2 לכל אחד, ורשימה נפרדת של שגיאות קריטיות.

איך מונעים מראיינים לקבל ציון על סמך ביטחון עצמי?

בקשו מהם לכתוב את הראיות הנצפות לכל קריטריון לפני מתן ציון, ולקשר כל ציון להתנהגות, כגון "משווה שתי אפשרויות ומציין את העלות של זו שלא נבחרה".

כמה זמן צריך להימשך ראיון עיצוב מערכת?

ראיונות נמשכים לרוב כשעה, אך האורך הנכון הוא מה שמאפשר למועמד להציג כל קריטריון ברובריקה שלך. בדוק זאת עם פיילוט.

האם רובריקה יכולה להפוך את הגיוס לאובייקטיבי?

זה הופך את הביקורת לעקבית יותר וקל יותר, אבל שיקול הדעת נשאר. המטרה היא שהמראיינים יסכימו מאותן סיבות, לא כדי להוציא אנשים מההחלטה.

איפה להתחיל

בחרו תפקיד פנוי אחד וכתבו את הצהרת הביצועים בת משפט אחד. ניסחו שלושה קריטריונים עם נקודות עוגן ורשימת שגיאות קריטיות קצרה, לאחר מכן בקשו מהנדס בכיר לפתור את המקרה שלכם באופן עצמאי. ערכו מפגש כיול אחד עם האנשים שיראיינו, כתבו מחדש את נקודות העוגן שגרמו לחילוקי דעות, ובנו את הרובריקה על מספר קטן של ראיונות אמיתיים לפני שתשתמשו בה באופן נרחב.

כדי לראות כיצד ניתן לבצע סשן כיול בשידור חי עם המראיינים שלכם, ולעשות בו שימוש חוזר בקצב אישי לאחר מכן, עיינו ב-AhaSlides.