איך אולפן הקולנוע לייקה ואינטל עושים מהפכה באנימציה עצירת תנועה עם AI

האולפן המוערך מאחורי 'Missing Link' ו- 'Coraline' משתף פעולה עם אינטל ליצירת כלי AI שיכול להיות קפיצה גדולה באנימציה עצירת תנועה.

איך אולפן הקולנוע לייקה ואינטל עושים מהפכה באנימציה עצירת תנועה עם AI

ב -15 השנים האחרונות, אולפן הפקת הסרטים לייקה היה חלוץ בתחום האנימציה בכך שהוא שילב בצורה חלקה בין אומנות הטקטיקה של סטופ-מושן להתקדמות טכנולוגית כולל CGI והדפסה תלת-ממדית.



כעת האולפן המבוסס על אורגון נמצא בחזית קפיצה נוספת על ידי שילוב AI ביצירת סרטיו.

במהלך הפקת סרטו המועמד לאוסקר חוליה חסרה , צוותי הטכנולוגיה והאפקטים החזותיים פיתחו אב טיפוס של כלי AI בשיתוף עם אינטל.



הבעיה לפתור: שורות.



לבובות המשמשות בסרטי Laika יש מגוון רחב של הבעות פנים שנוצרו בהמוניהם על ידי הדפסה תלת מימדית. ב חוליה חסרה לבד, יותר מ -106,000 פנים הודפסו בחתיכות (כלומר חלקים תחתונים ועליונים של פנים). זהו תהליך שימושי לשליטה על האופן שבו פניו של דמות נעות, אך הוא יוצר גם תפר גלוי המראה היכן מתחברים החלקים התחתונים והעליונים השונים.

זה היה אתגר עצום מכיוון שכאשר אתה הולך לקולנוע ואתה צופה בהופעות דמות, אתה מסתכל על פני הדמויות, אומר סטיב אמרסון, מפקח אפקטים חזותיים בלייקה. אתה מסתכל על העיניים שלהם, ובדיוק שם עמדנו לעשות את העבודה הקוסמטית הזו.

אמרסון הצטרף לפני 12 שנים לייקה לייצור של קורליין , ועל הסרט ההוא ומאז הצוות שלו הסתמך על התהליך הידני מאוד של RotoPainting.



[צילום: באדיבות Laika]

בדומה לפוטושופ, RotoPainting כולל בידוד והסרה של פריטים לא רצויים מסצנה, כגון אסדות בובות או קווי תפר. למרות שהוא יעיל, הוא גם דורש זמן רב להפליא.

אנחנו רוצים לנסות לתת לאנימטורים מרחב מרווח ליצירת הופעה טבעית על הבמה, אומר ג'ף סטרינגר, מנהל טכנולוגיית ההפקה בלייקה. זה אומר שעלינו להשתמש בהרבה אסדות. ההדפסה התלת -ממדית של הפרצופים הייתה כולה לתת להן ביצועים טבעיים שאי אפשר לעשות עם הפנים המכניות. כך שכמעט כל אחד מהחידושים הללו ביצירת הסרטים שלנו כרוך בעלות רבה עבור צוות רוטו.



עַל חוליה חסרה , למשל, היו בסרט 136,800 פריימים. בעזרת RotoPainting ידנית, ייקח יום לנקות סביב 50 פריימים.

יש לך הרבה כלים נהדרים למעקב אחר חלקים מהמסגרת ולציור דברים, אבל זה עדיין מסגרת אחר מסגרת, אומר סטרינגר. אז זה אחד הדברים שפשוט התחננו להאצה.

עם אב הטיפוס של לייקה ואינטל של אינטל, הם הצליחו להפיל את זה ב -50%.

הבדיקה הראשונית נעשתה ב- חוליה חסרה דמותו של ליונל (יו ג'קמן) ושיעור הצלחות די מוצק: מתוך 50 הזריקות שעיבדו להסרת קווי התפר, 35 חזרו שהיו שמישים או שהיו זקוקים רק לגעי-משנה קלים. למרות שערכת כלי הבינה המלאכותית לא הייתה בשימוש בגרסה הסופית של הסרט, סטרינגר אומר שהם ממשיכים לבדוק על דמויות שונות כדי לבנות מערך נתונים חזק ללמידת מכונה בתקווה לנצל אותו לסרט הבא של האולפן.

הם גם חוקרים את מקרי השימוש הרחבים יותר של AI ב- RotoPainting כדי להסיר יותר מקווי תפר (למשל, אסדות בובות).

אם בסופו של דבר זה יצליח, סביר להניח שנסיים עם איש מדען נתונים בצוות העובד עם ערכות נתונים מוקדמות מכל הדמויות - ונבנה את מודלי ההדרכה האלה, אומר סטרינגר.

למרות שהוא חדשני וחוסך זמן, השימוש ב- AI בסרטי סטופ-מושן יכול לדרג את הטהורים של צורת האמנות. לייקה לא זרה בשימוש בטכנולוגיה, אך האם ההתקדמות שלהם בתחום הבינה המלאכותית מרחיקה אותם מהאומנות הספציפית של עצירת תנועה?

עבור אמרסון, זה תלוי במה שמשרת את הסיפור בצורה הטובה ביותר.

[צילום: באדיבות Laika]

אני אתן לך דוגמה, פיצוץ עם צרור עשן, הוא אומר. אתה רוצה להנפיש עשן מסגרת אחת בכל פעם, יהיה עליך לצאת ולקבל חומר כלשהו כמו כדורי כותנה. אם אתה חבר קהל שצופה בסרט ויש פיצוץ וזו חבורה של כדורי צמר גפן, זה ייראה ממש מגניב. וזה כיף. האמן לי, אני אוהב סוג כזה של יצירת סרטים. אבל תהיה שבריר שנייה שבו זה יוציא אותך מזה. ואתה תזהה שזה לא עשן - זה כדורי כותנה.

אמרסון מדגיש כי האנימטורים מנסים לעשות כמה שיותר במצלמה עם אסדות וסטים ככל האפשר. אבל הם לא מפחדים לרדוף אחר פתרונות דיגיטליים במידת הצורך, כולל AI. המטרה הסופית עם משהו כמו האב טיפוס שלהם להאיץ את RotoPainting היא להשקיע פחות זמן בפרטי הייצור ויותר זמן בלברר כיצד ניתן להציג סיפור בצורה הטובה ביותר.

ישנם שני סוגי עבודה שאנו עושים כאן באפקטים חזותיים: יש את העבודה האובייקטיבית ויש את העבודה הסובייקטיבית. העבודה האובייקטיבית היא שיש סוג של אסדה מטורפת במסגרת שצריך להיעלם. יש קו שחוצה את פני הבובה שצריך להסיר, אומר אמרסון. הצד הסובייקטיבי של זה הוא, האם המסגרת יפה? האם זה מרגש? האם זה לא דומה לשום דבר שראיתי בעבר? אז הרבה ממה שאנחנו רודפים כאן הוא היכולת להיות מסוגל לעבור את הדברים האובייקטיביים. יש לקוות שנוכל למנף AI ולמידת מכונות כדי לעזור לנו, ואז נוכל להתמקד יותר בסובייקטיבי ובאמת לנסות לגרום לתמונות האלה להיראות לא כמו כל דבר שראו מישהו מעולם עם סרטי סטופ-מושן.