כלי NVIDIA הופך סקיצות פשוטות לציורים באמצעות AI

NVIDIA מתנסה באופן פעיל בתחום הלמידה העמוקה, ותוצאות עבודתה לפעמים מעניינות למדי. החברה הודיעה ב-GDC 2019 על יצירת GauGAN, אפליקציית ציור חכמה המשתמשת במודל למידה עמוקה כדי ליצור גרסאות פוטוריאליסטיות של ציורים פשוטים. שם האפליקציה מתייחס לאמן הפוסט-אימפרסיוניסט הצרפתי פול גוגן ולשימוש של התוכנה ברשתות יריביות (GANs) כדי ליצור תמונות המחקות ציורים באופן ריאליסטי.

איך GauGAN עובד? לפי ההסבר של החברה, האפליקציה היא כמו "מברשת חכמה" שממלאת את פרטי הסקיצה של המשתמש (NVIDIA מכנה אותה "מפת פילוח"). בעיקרו של דבר, המשתמש או האמן פשוט קובעים תוכנית למה שהוא רוצה לראות בסופו של דבר, ומתייג כל קטע, ומציין מה הוא צריך להיות. לאחר מכן, GauGAN משתלט, ממלא פרטים נוספים והופך את הציורים למציאותיים יותר.

מודל הלמידה העמוקה, מיומן על מיליוני תמונות אמנותיות, מאכלס את הנוף עם תוצאות מרשימות (אך לא תמיד מושלמות). אם תצייר בריכה, אלמנטים סמוכים כמו עצים וסלעים ישתקפו במים. מספיק לשנות את תווית הקטע מ"דשא" ל"שלג", והתמונה כולה תשתנה, תהפוך לחורפית, והעצים העלים יהפכו חשופים. כדי להבין על מה אנחנו מדברים, אתה יכול לצפות בסרטון למטה.

ראוי גם לציין שלמרות ש-GauGAN משתמשת בידע נרחב המבוסס על שורה של תמונות אחרות כדי ליצור את העבודות הסופיות, האחרונות עדיין נחשבות מקוריות מכיוון שהאפליקציה מייצרת תמונות חדשות לחלוטין.

עורך הגרפיקה החכם החדש של NVIDIA אינו מוגבל רק לסצנות או נופים טבעיים - האפליקציה יכולה להוסיף מבנים, כבישים ואפילו אנשים. GauGAN גם מאפשרת למשתמשים להחיל פילטרים, ולעצב את התוצאה כך שתתאים לסגנון הרצוי להם. פילטרים כאלה, בין היתר, יכולים לחקות את הסגנון של אמן ספציפי (למשל, ואן גון) או להתאים את התאורה של סצנה, לשנות תמונות מיום ללילה.

לא ברור אם GauGAN ישוחרר אי פעם לשימוש צרכני יומיומי, אבל אני חושב שבמוקדם או במאוחר משתמשים רגילים עשויים בהחלט לקבל כמה כלים די שימושיים כמו זה, שיפשטו את העבודה במגוון תחומים: מארכיטקטורה והמחשה ועד לפיתוח משחקים.

עם זאת, במשאב NVIDIA AI Playground, המתעניינים יכולים להכיר כמה יכולות למידת מכונה. לדוגמה, בהדגמת העברת סגנון אמנותי הנוכחת שם, אתה יכול לעבד כל תמונה בסגנון של אמנים מפורסמים.

ניסויים דומים אחרים של NVIDIA כוללים מחקר המראה כיצד ניתן לשלב אפקטים חזותיים שנוצרו בינה מלאכותית עם צינור רסטר מסורתי. התוצאה היא מערכת גרפית היברידית שיכולה לשמש במשחקים, סרטים ומציאות מדומה. דוגמה דומה נוספת היא אלגוריתם להפיכת רחובות מלאי שלג לקיציים, שפותח על ידי מומחי החברה לאימון טייס אוטומטי יעיל יותר.

מקור: 3dnews.ru