תהליך סקירה Peer בהנדסת הנדסה

סקירת פירס פועלת כמנגנון המרכזי של ניהול השערים למימון מחקר הנדסי ברחבי העולם.כאשר חוקר מגיש הצעה מענק לסוכנויות כגון קרן המדע הלאומית (NSF), מועצת המחקר האירופית, או מועצת המחקר של בריטניה ומדעי הפיזיקה, המסמך נכנס צינור הערכה מובנה.צנרת זו מבטיחה כי משאבים ציבוריים ופרטיים מוגבלים מוקצה לפרויקטים עם ההבטחה המדעית החזקה ביותר וההסתברות הגבוהה ביותר של קידום התחום.

התהליך מתחיל בדרך כלל עם בדיקה אדמיניסטרטיבית לציית לדרישות פורמט והתאמה.ההצעה עוברת למנהל תוכנית או קצין המזהה בודקים פוטנציאליים המבוססים על מומחיות התאמת . Reviewers עשויים להימשך מפאנל עומד, מאגר של מומחי אד-הואק, או שילוב של שניהם. כל מבקר קורא באופן עצמאי את ההצעה ומספק ביקורת בכתב עם ציונים סטנדרטיים, לאחר ביקורות פרטניות, או פאנל של ביקורת אישית, או של #17, כמעט, כמעט, כמעט, כמעט כל מבקר יחיד, או עם תשובות וספק, כמעט, כמעט, כמעט, או קונסולה של כל אחד, או קונסולה של כל אחד, או קונסולה של כל מבקר יחיד, כמעט, כולל, כולל, כולל, או קונסולת ביקורת על תשובות וספק, על ידי בודקים וספק, כמעט, כמעט, כמעט, או קונסולת תשובות וספק, כמעט, כמעט, כמעט, או קונסולה של כל אחד, או קונסולה של כל מבקר עצמאי, באופן עצמאי, באופן עצמאי, עם תשובות וספק, כמעט, כמעט, כולל תשובות על ידי בודקים וספק, כמעט, כמעט, כמעט, כולל, כולל, כולל, על ידי בודקים, על ידי בודקים של כל אחד, כולל, כולל תשובות וספק דיון עצמאי,

סוגים של Peer Review בהנדסת הנדסה גרנט הערכה

ארגוני מימון שונים משתמשים במודלים שונים של ביקורת, כל אחד מהם עם היתרונות והמגבלות שלו.שלושת הסוגים הנפוצים ביותר בהנדסה הם:

  • (FLT:0)Single-Blind Review: ⁇ F1) הבודקים יודעים את הזהות ואת ההשתייכות המוסדית של המועמדים, אבל המועמדים אינם יודעים מי סוקר את הצעתם.מודל זה משמש באופן נרחב על ידי גופי מימון אמריקאים כגון NSF.זה מאפשר לסקרנים לשקול את המסלול ואת המשאבים של צוות המחקר, אבל זה גם פותח את הדלת להטיה המבוססת על מוסד, או קשרים אישיים.
  • (FLT:0)Double-Blind Review: ⁇ F1) הן הסקירה והן המבקש נותר אנונימי זה לזה.גישה זו שואפת להפחית את ההטיות הקשורות למין, גזע, בכירות והשתייכות מוסדית. עם זאת, בתחומים הנדסיים מיוחדים שבהם רק קומץ מומחים קיימים, עיוורון עשוי להיות בלתי אפשרי.
  • (FLT:0) Open Review:BuildFLT:1 , Identities של שני המבקרים והמועמדים נחשפים. Advocates טוענים כי סקירה פתוחה מגבירה את האחריות, משפרת את איכות ההערות, ומרתיעה ביקורות ויניל או מזחלות.עם זאת, סוקרים עשויים להסס לבקר מועמדים בכירים בגלוי, ואת הפחד של הצעות reprise יכול להחליק הערכות.

הבחירה של מנגנון ביקורת מעצבת באופן ישיר כיצד נקבעים הצעות, ואשר פרויקטים בסופו של דבר מקבלים תמיכה במחקר הנדסי, אשר כרוך לעתים קרובות עבודה יישומית, בין-תחומית או בתעשייה, דורשות שיתוק זהיר של מודלים אלה כדי להבטיח הערכות הוגן ומודע.

ביקורת: What Reviewers Look For

סוכנויות מימון מגדירות קריטריונים מפורשים כי המבקרים חייבים ליישם, בעוד המילה המדויקת משתנה, ארבעה עמודי עמוד מופיעים באופן עקבי על פני תוכניות מענק הנדסי:

טכני Merit

החוקרים מעריכים האם המחקר המוצע הוא מדעי, קפדני מבחינה מתודולוגית, וניתן להגיע לקווי הזמן והתקציב המוצעים.הם בוחנים את הבהירות של השערה או שאלת המחקר, את ההתאמה של הגישה הניסויית או החישובית, ואת מאזן הסיכונים-הסיכון (FLT:0Technical Worth אינו רק על נכונות; הוא כולל הערכה אם תכנית המחקר צפויה לייצר תוצאות משמעותיות בהתחשב באסטרטגיות של התדרדרדרדרות יותר מאשר במקרים של הפחתה של הפחתה אפשרית.

חדשנות

קריטריון זה מודד את המידה שבה הפרויקט מציג מושגים חדשים, שיטות, או טכנולוגיות. סוקרים שואל: האם ההצעה דוחפת מעבר למצב האמנות הנוכחי?האם היא מאתגרת פרדיגמות קיימות? הצעות חדשניות לעתים קרובות כרוכות בגישות בין-תחומיות, יישומים חדשים של כלים קיימים, או פיתוח של פלטפורמות ניסיוניות חדשות לחלוטין.עם זאת, יש מתח בין חידוש לסיכון רב: רעיונות חדשניים עשויים להיות חסרים נתונים ראשוניים, מה שהופך אותם לחיקויים יותר קשה יותר לראיון חוויות.

השפעה

השפעה מוערכת לאורך כמה ממדים.אפקט אינטלקטואלי רואה את קידום הידע ההנדסי, בעוד השפעה רחבה יותר כוללת יתרונות חברתיים, צמיחה כלכלית, פיתוח כוח העבודה ותרומות לביטחון לאומי או קיימות. סוכנויות רבות דורשות הצהרות נפרדות על השפעות רחבות יותר.מבדקים מעריכים האם הפרויקט יניב נתונים, כלים או טכניקות שניתן ליישם מעבר לשאלה המחקרית המיידית.FLT:0Proposals אשר מבטאים מסלול ברור ממחקר לשימוש בפטנטים, באמצעות קוד פתוח, או סטנדרטים מתקדמים יותר, קודים, קוד פתוח, על פני מדיניות, על פני LT: 1.

תקציב ותיקון משאבים

תקציב מאורגן היטב המיישר עם תוכנית המחקר הוא חיוני.מבקרים מחפשים הערכות סבירות עלות עבור כוח אדם, ציוד, אספקה, נסיעות, ופרסום עמלות. יתר על המידה מנפח תקציבים או אלה שחסרים הצדקה יכולים להעלות דגלים אדומים, גם אם המדע חזק. ולהיפך, ניכוי עשוי לסמן כי המבקש לא נחשב במלוא המשאבים הדרושים.

קריטריונים נוספים כוללים לעתים קרובות את הכישורים של צוות המחקר, את הסביבה המוסדית, ותוכניות לניהול נתונים ושיתוף.כל קריטריון נושא משקל שיכול להשתנות על ידי תוכנית וסוכנות, ומבקרים נדרשים לשקול אותם באופן הוליסטי ולא מכני.

כיצד Peer Review Shapes Final Funding החלטות

לאחר הגשת ביקורות פרטניות, מנהל התכנית או הכיסא הלוח מסונתז את המשוב בסוכנויות רבות, הצעות מדורגות על ידי ציון ממוצע, אבל ההחלטה הסופית אינה רק אלגוריתם.FLT:0Panel דיונים מאפשרים לבודקים לוויכוחים, אי הבנה נכונה, והגנה על הצעות שוליים.FLT:1 הצעה עם ציונים מפוצלים - שני מצוינים וצודק אחד - אולי כדאי לבדוק מחדש אם החוקרים הראשונים היו מעורבים בשיקולים, או תקפים, כמו גם במקרים של טיפול לא נכון, או תקפים, כמו גם כן, או תקפים, או תקפים, או תקפים, או תקפים, למשל, למשל, או תקפים, אם זה היה תקפים, אם זה היה קריטריונים מוקדמים, אם זה היה תקפים.

משוב ביקורתי אינו מוגבל לעשרות.הערות בכתב מספקות הדרכה מפורטת כי מועמדים יכולים להשתמש כדי לחזק את ההגשה.תחת NSF & #8217; לדוגמה, סוקרים להגיש ביקורת אנונימית כי מאוחר יותר משותפים עם החוקר הראשי.הערות אלה מדגישות חולשות בתכנון הניסוי, פערים בסקירה הנדסית, פיקוחים בניהול סיכונים, או מצגת לא ברורה.

תפקידו של מנהל התכנית כקבלת החלטות

זוהי תפיסה מוטעית נפוצה שביקורת עמיתים לבדה מכתיבה החלטות מימון.למעשה, קציני התוכנית מחזיקים באחריות משמעותית לפרשת קלט ביקורתי.הם מזהים הצעות כי למרות ציוני בינוניים, לטפל בצורך לאומי דחוף או פער בתיק של הסוכנות.הם גם דוחים הצעות כי למרות ציונים חזקים, ליפול מחוץ לטווח התוכנית או עבודה כפולה.

היתרונות של Peer Review בהנדסת הנדסה מחקר מימון

מערכת הביקורת עמיתים, למרות חסרונותיה, מספקת כמה יתרונות מוחשיים המצדיקים את תפקידה המרכזי.

  • (FLT:0) איכות הסביבה: FLT:1 על ידי נקיטת הצעות לביקורת על ידי מומחים עצמאיים, ביקורת עמיתים מסננים פרויקטים חלשים, מעוצבים מבחינה מדעית, או בלתי סבירים.זה מגן על משלמי המסים וכספי התורם מבזבוז ושומר על האמינות המחקר במימון.
  • (FLT:0) רוח ואובייקטיביות: FLT:1 למרות שההטיות קיימות, תהליך ביקורת מובנה עם מספר סוקרים ופאנלים דיונים מציע מערכת שוויונית יותר מאשר החלטות שהתקבלו על ידי מנהל יחיד או מינוי פוליטי. סטנדרטי ניקוד מפורש הריסות ומדיניות סכסוכים של אינטרסים מחזקים עוד יותר את ההוגנות.
  • (FLT:0) מעורבות קהילתית: FLT:1 , Peer Review עוסק בקהילה הנדסית רחבה יותר בקביעת סדרי עדיפויות מחקר. Reviewers מייצגים מוסדות מגוונים ושדות תת-קרקעיים, ולהבטיח כי אין פרספקטיבה אחת שולטת.מודל זה חלקי מחזק את הלגיטימיות של החלטות מימון.
  • (FLT:0) התפתחות מקצועית: FLT:1 משרת כמבקר נותן למהנדסים תובנה בסטנדרטים של המקצוע שלהם, חושף אותם רעיונות מתקדמים, ומציינים את כישורי החשיבה הקריטיים שלהם. חוקרים מוקדמים רבים מוצאים את הניסיון הראשון שלהם בפאנל הסקירה הופכת לניסיון לכתיבה משלהם.
  • (FLT:0)Feedback Loop: 1FLT ביקורות בכתב מספק המלצות ניתנות לפעולה לשיפור איכות ההצעה לאורך זמן. הצעות שאינן ממומנות לעתים קרובות מתחזקות לאחר תיקון בהתבסס על הערות ביקורת, ורבות מהבקשות מצליחות בסיבובים הבאים.

אתגרים וביקורות של Peer Review בהנדסה

שום מערכת אינה ללא חסרונות, וביקורת עמיתים על מימון מחקר הנדסי הייתה נושא לביקורת מתמשכת של חוקרים ומנהלי מימון.

ביסאס וקונסרביזם

מחקרים רבים תיעדו הטיות בסקירה עמיתים הקשורים למין, גזע, יוקרה מוסדית, ואת שלב הקריירה.לדוגמה, ניתוח של NIH מענק יישומים מצא כי חוקרי נשים קיבלו ציונים נמוכים יותר מאשר גברים עם כישורים אובייקטיביים שווה ערך. בהנדסה, שבו מגדר וגיוון גזעי נשאר נמוך, הטיה זו יכולה לחדד פערים מערכתיים.

« « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « « «

מספר ההצעות שהוגשו לסוכנויות מימון גדולות גדל באופן דרמטי, בעוד הבריכה של מבקרים מוסמכים לא שמרה על הקצב. הרבה מבקרים להתמודד עם עומס יתר, המוביל לבדיקות מוצפות, הערות שטחיות, ועקביות נמוכה יותר. A Review שנכתבה בשעה האחרונה לפני המועד האחרון לא יכול לשקף את אותה טיפול כמו אחד מוכן עם זמן מספיק.איכות של ביקורות משפיע ישירות על ההוגנות והדיוק של החלטות.

משחקים את המערכת

התנהגויות לא אתיות לפעמים להופיע.מבקרים עשויים לעכב את ההצעות שלהם על ידי כתיבת ביקורות קשות של המתחרים.חלק מהמועמדים מנסים לזהות את הבודקים שלהם וללוב אותם באופן לא רשמי. חברי פאנל עשויים לשתף פעולה כדי לתמוך הצעות ממוסדות שלהם.ממממממממנים סוכנויות להילחם בהליכים אלה עם הסכמים סודיות קפדניים, הצהרות סותרות של אינטרסים, וביקורת אקראית של הערות ביקורת.

קושי בהערכה בין-תחומית

מחקר הנדסי יותר ויותר משתרע על דיסציפלינות מרובות - מחקר חומרים מדע, מדעי המחשב, ביולוגיה ומדע חברתי.פאנלים ביקורת עמיתים מסורתי לעתים קרובות חסר את רוחב כדי להעריך הצעות כאלה באופן הוליסטי. A סוקר מ subfield אחד יכול לפטר את התרומות של אחר, המוביל להערכות מפוצלות. Agencies הציג לוחות עקפים, שלבים ⁇ ential Review, ויועץ חיצוני קורא לטפל טוב יותר הגשה תחומית, אבל האתגר החריף נשאר.

מאמצים לשיפור Peer Review for Engineering Funding

תוך הכרה במגבלות הללו, סוכנויות מימון וארגונים מחקר יישמו מגוון רפורמות.

טפסים ו- Rubrics

הרחק מביקורות נרטיביות פתוחות, סוכנויות רבות דורשות כעת ביקורתיות כדי להבקיע קשקשים ספציפיים על סולם ה- Likert.מבנה זה מקטין את ההשפעה של גורמים לא רלוונטיים ומבקרי כוחות כדי להצדיק את הדירוג שלהם.לדוגמה, קריטריונים של הסקירה של NSF היו מעודן לאורך עשרות שנים כדי לאזן את הערך האינטלקטואלי וההשפעות הרחבות יותר, עם הנחיות ברורות על מה מהווה ביצועים מעולים בכל תחום.

אימון וקאליברציה

סוכנויות מציעות כעת תוכניות הכשרה פורמליות המכסות הטיה לא מודעת, ניהול סכסוכים של אינטרסים, משוב יעיל.חלק מחזיקים תרגילי כיבוד שבו סוקרים מקבלים הצעת דגימה ודן פערים לפני הערכת ההגשה האמיתית.

יוזמות גיוון ובלעדיות

מימון ארגונים לגייס באופן פעיל ביקורת מקבוצות תת-ייצוגיות, מוסדות קטנים יותר, ומגזרים לא אקדמיים כגון מעבדות תעשייה וממשל. לוחות דיפוך פחות נוטים לסווגן וסביר יותר לזהות את הערך של מחקר שמטפלים בקהילות מוחלשות. NSF & #8217; הוועדה על הזדמנויות שוות במדע ובהנדסתות סקריפי נתונים דמוגרפיים וממליץ על התאמות מדיניות.

תהליכי סקירה פתוחים ו- Transud

מספר קטן אך גדל של תוכניות ניסו עם פרסום דוחות של ביקורת לצד הצעות מימון.שקיפות זו מגבירה את האחריות ומספקת תובנות פומביות בתהליך קבלת ההחלטות.זה גם מאפשר לקהילה להעריך את איכות הביקורות עצמן. בעוד חששות לגבי פרטיות הסקירה נשארות, תוכניות טייס באירופה הראו כי ניתן ליישם בדיקה פתוחה ללא מתן אישור למועמד מוכן לשרת.

עתידה של Peer Review בהנדסת הנדסה

ככל שהטכנולוגיה והתקשורת המדעית מתפתחים, כך גם תבחן עמיתים.איי. אינטליגנציה מלאכותית וכלים לעיבוד שפה טבעית מפותחים כדי לסייע עם ביקורת התאמת, גילוי plagiarism, ואפילו טריג'ימ ראשוני של הצעות.כלים אלה אינם יכולים להחליף את השיפוט האנושי, אך עשויים להפחית את הנטל המנהלי ואת דגלי הדגל.שרתים מראש לשרתים ולפתוח מחדש מאפשרים לחוקרים לאסוף משוב קהילתי לפני הגשת פורמלית, לספק שכבה פוטנציאלית של ביקורת לא פורמלית של עמיתים שלא ניתן לשפר את ההצעה.

מגמה נוספת היא השימוש הגובר של מימון טייסים ו-Phed פרסים שלב 1 (במקום החלטה אחת במעלה, סוכנויות לממן פרויקטים קצרים, בסיכון גבוה עם הערכות מבוססות אבני דרך.Per סקירה בשלב הראשוני הוא קל יותר, והמשך המימון תלוי התקדמות שערכה פאנל מומחה קטן.מודל זה תומך במחקר הנדסי כי ייתכן שלא לשרוד בדיקה מסורתית מלאה.

לבסוף, קיימת תמיכה גוברת ל-FLT:0 מודלים של ביקורת ביקורת מקצועית (FLT) 1:1 שבו מועמדים ומבקרים עוסקים בדיאלוג הרציני לפני הניקוד הסופי דומה לתהליך "rebuttal" המשותף בכנסים במדעי המחשב, גישה זו מאפשרת למועמדים לטפל בשגיאות עובדתיות או לשאול שאלות.זה מבטיח להפחית אי הבנות ותגמול, אם כי זה דורש יותר זמן מכל הצדדים.

מסקנה

סקירת פירס נותרה המנגנון המוסמך ביותר להכרעה אילו הצעות מחקר הנדסיות מקבלות מימון.זה מספק הערכה מובנית, מונחה על ידי מומחה כי מאזן השקיה טכנית, חדשנות והשפעה חברתית. בעוד המערכת רחוקה מלהיות מושלמת - המתועדת על ידי הטיה, השמרניות, שימורים, ולחצים לוגיסטיים - על רפורמות מתכוונות הן מקבלות אותה הוגנת יותר, שקופה יותר, ועוד, עבור הנדסה, כיצד טכנולוגיות חיוניות לסקירה עצמית, הן מסייעות לסקירה של פעולות חדשות, אך הן לסקירה, אך הן פועלות, אך הן מבטיחות, אך הן מבטיחות, אך ורק לסקירה של פעולות בסיסיות של פעולות חדשות של ניהוליתות, אך ורק לסקירה של פעולות המבוססות על ידי ניהוליתות של פעולות חדשות של פעולות חדשות של ניהולית, אך ורק על ידי ניהוליתות, אך ורק על ידי ניהול יכולות לסקירה, אך ורק על ידי ניהוליות, אך ורק על ידי ניהוליות, אך ורק על ידי ניהולית, אך ורק על ידי ניהולית, אך ורק על ידי ניהולית, תמיכה יעילה של טכנולוגיות חדשות של טכנולוגיות חדשות של פעולות מוכחות, אך ורק על ידי ניהולית, אך ורק על ידי ניהול, אך ורק על ידי ניהולית, אך ורק על ידי ניהולית, על ידי ניהולית, על

(ב) עיין ב[[המאה ה-20]] ב[[1924]], [[1924]]]] ב[[1924]], [[1924]]]], [[1924]]]]]], [[1924]]]]]]]]]]]], [[1924]]]]]]]]]]]]]]]]]], [[1924]]]]]]]]]]]]]], [[1924]]]]]]]]]]]], [[1924]]]]]]]]]]]]]]]]]]]]]]]]]], [[1924]]]]]]]], [[1924]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]], [[1924]]]]]]]]]]]], [[1924]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]