(אשראי: דרו וובר / מעבדת קורנל לאורניתולוגיה)

האפליקציה הניידת Merlin Bird Photo ID יכולה לזהות מאות מינים בצפון אמריקה שהיא "רואה" בתמונות, הודות לטכנולוגיית למידת מכונה.

לאחר הורדתו במכשיר נייד, האפליקציה יכולה להגיע לכל מקום - אפילו מקומות ללא שירות סלולרי או Wi-Fi.

"כשאתה פותח את אפליקציית Merlin Bird Photo ID, אתה נשאל אם אתה רוצה לצלם עם הטלפון החכם שלך או לשלוף תמונה מהמצלמה הדיגיטלית שלך", אומרת מנהלת הפרויקט של מרלין ג'סי בארי במעבדת קורנל לאורניטולוגיה. "אתה מגדיל את התצוגה על הציפור, מאשר את התאריך והמיקום, ומרלין יציג בפניך את האפשרויות הטובות ביותר להתאמה מבין 650 המינים הצפון אמריקאים שהוא מכיר."

כנפיים, מקור וציפורניים

מדעני המחשבים של Caltech ו- Cornell Tech הכשירו את מרלין לזהות ציפורים בכך שהציגו לה כמעט מיליון תמונות שנאספו והוסרו על ידי צפרים ומתנדבים שגויסו על ידי מעבדת קורנל. ההערות כוללות את מיני הציפור כמו גם נקודות מפתח המזהות אלמנטים פיזיים כמו כנפיים, מקור וציפורניים.

כאשר משתמש באפליקציה מציג בפניו ציפור לזיהוי, מרלין בוחר מינים התואמים היטב את המאפיינים הללו. כמו כל צפר טוב, המערכת שוקלת מינים שיימצאו באותה תקופה ספציפית של השנה ובאותו מיקום באמצעות מידע מ- eBird, משאב ציפורים מקוון שאוסף ומתעד בממוצע 7 מיליון רשומות תצפית על ציפורים בכל חודש מרחבי העולם. .

"בבניית תעודת הזהות של מרלין בירד התייחסנו במיוחד לאיכות וארגון הנתונים", אומר סרג 'בלונגי, פרופסור למדעי המחשב ב- Cornell Tech. יחד עם פייטרו פרונה מהמכון הטכנולוגי של קליפורניה (Caltech), הוא המייסד של Visipedia, פרויקט הגג הממומן על ידי Google, המשתמש בהתקדמות בלימוד מכונה וראיית מחשב כדי לסווג אובייקטים בתצלומים.

"בסופו של דבר אנחנו רוצים ליצור פלטפורמה פתוחה שכל קהילה יכולה להשתמש בה כדי ליצור כלי סיווג חזותי לפרפרים, צפרדעים, צמחים או כל מה שהם צריכים", אומר בלונגי.

"האפליקציה הזו היא שיאה של שבע שנות עבודתם הקשה של הסטודנטים שלנו והיא מונעת על ידי ההתקדמות האדירה שעושים מדענים בתחום ראיית המחשב ולמידת מכונות ברחבי העולם", אומר פרונה, פרופסור להנדסת חשמל בחטיבה להנדסה של קלטק ומדע יישומי. "מכונה שמזהה חפצים בתמונות, כמו בני אדם, הייתה חלום רחוק כשהייתי סטודנט לתואר שני ועכשיו זה סוף סוף קורה."

תמונות טובות, התאמות טובות

כמה טוב מזהה תמונה של מרלין בירד? "הדיוק נע סביב 90 אחוז אם תצלום המשתמש איכותי. הגש תמונה מטושטשת או כזו שבה הציפור קטנה או מכוסה חלקית בעלים והסיכויים לקבל התאמה מדויקת יורדים ", אומר סטיב ברנסון, חוקר פוסט-דוקטורט בכיר בהנדסת חשמל בקלטק.

למרות התקדמות ההיי-טק, בני האדם הם עדיין חלק חשוב בתהליך. "אנו זקוקים לנתוני eBird של צופי ציפורים יחד עם מומחים שיכולים לתייג את התמונות המשמשות לאימון מרלין", אומר סטודנט לתואר שני ב"קלטק ", גרנט ואן הורן. "אתה צריך מורים שילמדו את המכונה את מה שהיא צריכה לעשות. המערכת שלנו משלבת את המומחיות של מאות צפרים וצפרים. " ואן הורן וברנסון הם שניהם חלק מצוות Visipedia, ופיתחו את האלגוריתמים המאפשרים למרלין ללמוד לזהות את הציפורים.

סיקור עולמי לבוא

ממש מעבר לפינה שחרור תעודת זהות של מרלין בירד בספרדית לציפורים במקסיקו. בהמשך הדרך, צוות מרלין יפיק גרסאות עבור דרום אמריקה, אירופה, אסיה, אפריקה ואוסטרליה - ובסופו של דבר יתרחב לכיסוי העולם.

"הדבר הנפלא בפרויקט זה הוא שיתוף הפעולה עם צוות Visipedia", אומר בארי. "יש לנו מוצר שבאמת עובד מכיוון שהוא נתמך על ידי מחקרים נהדרים והוא נהדר עבור קהילת הצפרות מכיוון שהוא נבנה לצפרים על ידי צפרים."

תעודת הזהות המעודכנת של Merlin Bird Photo זמינה בחינם למערכות iOS או Android ITunes של אפל ו Play Google חנויות אפליקציות. זהו זוג עם אפליקציית Merlin המקורית, שפורסמה בשנת 2014, המשתמשת בכמה שאלות קצרות כדי לעזור למשתמשים לצמצם את זהותה של ציפור חדשה.

תעודת הזהות של מרלין בירד מופעלת על ידי Visipedia בתמיכה של גוגל, מכון ג'ייקובס טכניון-קורנל והקרן הלאומית למדע.

מקור: קלטק

ספרים קשורים:

at InnerSelf Market ואמזון