NVIDIA กำลังทดลองอย่างแข็งขันในด้านการเรียนรู้เชิงลึกและบางครั้งผลลัพธ์ของการทำงานก็ค่อนข้างน่าสนใจ บริษัทได้ประกาศที่ GDC 2019 ถึงการสร้าง GauGAN แอปพลิเคชันการวาดภาพอัจฉริยะที่ใช้โมเดลการเรียนรู้เชิงลึกเพื่อสร้างภาพวาดที่เรียบง่ายในเวอร์ชันเสมือนจริง ชื่อของแอปหมายถึงศิลปินโพสต์อิมเพรสชั่นนิสต์ชาวฝรั่งเศส Paul Gauguin และการใช้ซอฟต์แวร์ของเครือข่ายปฏิปักษ์ทั่วไป (GAN) เพื่อสร้างภาพที่เลียนแบบภาพวาดอย่างสมจริง
GauGAN ทำงานอย่างไร? ตามคำอธิบายของบริษัท แอปนี้เหมือนกับ "แปรงอัจฉริยะ" ที่เติมรายละเอียดของภาพร่างของผู้ใช้ (NVIDIA เรียกมันว่า "แผนที่การแบ่งส่วน") โดยพื้นฐานแล้ว ผู้ใช้หรือศิลปินเพียงแค่วางแผนสำหรับสิ่งที่เขาต้องการเห็นในตอนจบ และติดป้ายกำกับแต่ละส่วนเพื่อระบุว่าควรเป็นอย่างไร จากนั้น GauGAN ก็เข้ามารับช่วงต่อ กรอกรายละเอียดเพิ่มเติม และทำให้ภาพวาดดูสมจริงยิ่งขึ้น
โมเดลการเรียนรู้เชิงลึกที่ได้รับการฝึกฝนเกี่ยวกับภาพศิลปะนับล้านภาพ จากนั้นจึงสร้างภูมิทัศน์ด้วยผลลัพธ์ที่น่าประทับใจ (แต่ไม่ได้สมบูรณ์แบบเสมอไป) หากคุณวาดสระน้ำ องค์ประกอบใกล้เคียง เช่น ต้นไม้และหิน จะสะท้อนในน้ำ ก็เพียงพอแล้วที่จะเปลี่ยนป้ายกำกับส่วนจาก "หญ้า" เป็น "หิมะ" และภาพทั้งหมดจะเปลี่ยนเป็นฤดูหนาวและต้นไม้ที่มีใบจะเปลือยเปล่า เพื่อให้เข้าใจถึงสิ่งที่เรากำลังพูดถึง คุณสามารถชมวิดีโอด้านล่าง
นอกจากนี้ ยังเป็นที่น่าสังเกตว่าถึงแม้ว่า GauGAN จะใช้ความรู้ที่กว้างขวางโดยอิงจากรูปภาพอื่น ๆ มากมายเพื่อสร้างผลงานขั้นสุดท้าย แต่อย่างหลังก็ยังถือว่าเป็นผลงานต้นฉบับ เนื่องจากแอปพลิเคชันสร้างรูปภาพผลลัพธ์ใหม่ทั้งหมด
โปรแกรมแก้ไขกราฟิกอัจฉริยะใหม่ของ NVIDIA ไม่ได้จำกัดอยู่เพียงฉากธรรมชาติหรือทิวทัศน์เท่านั้น แอปสามารถเพิ่มอาคาร ถนน และแม้แต่ผู้คนได้ GauGAN ยังอนุญาตให้ผู้ใช้ใช้ฟิลเตอร์ โดยจัดสไตล์ผลลัพธ์ให้เหมาะกับสไตล์ที่ต้องการ เหนือสิ่งอื่นใด ฟิลเตอร์ดังกล่าวสามารถเลียนแบบสไตล์ของศิลปินคนใดคนหนึ่ง (เช่น แวน กอน) หรือปรับแสงของฉาก โดยเปลี่ยนภาพในแต่ละวัน
ยังไม่ชัดเจนว่า GauGAN จะได้รับการเผยแพร่เพื่อการใช้งานในชีวิตประจำวันของผู้บริโภคหรือไม่ แต่ฉันคิดว่าไม่ช้าก็เร็วผู้ใช้ทั่วไปอาจได้รับเครื่องมือที่มีประโยชน์เช่นนี้ ทำให้งานในหลากหลายด้านง่ายขึ้น ตั้งแต่สถาปัตยกรรมและภาพประกอบไปจนถึงการพัฒนาเกม
อย่างไรก็ตาม ในทรัพยากร NVIDIA AI Playground ผู้ที่สนใจสามารถทำความคุ้นเคยกับความสามารถด้านการเรียนรู้ของเครื่องบางอย่างได้ ตัวอย่างเช่น ในการสาธิต Artistic Style Transfer คุณสามารถประมวลผลภาพถ่ายใดๆ ก็ตามในสไตล์ของศิลปินที่มีชื่อเสียงได้
การทดลองอื่นๆ ที่คล้ายกันจาก NVIDIA รวมถึงการศึกษาที่แสดงให้เห็นว่าเอฟเฟกต์ภาพที่ AI สร้างขึ้นสามารถนำมารวมกับไปป์ไลน์การแรสเตอร์แบบดั้งเดิมได้อย่างไร ผลลัพธ์ที่ได้คือระบบกราฟิกไฮบริดที่สามารถนำไปใช้ในเกม ภาพยนตร์ และความเป็นจริงเสมือนได้ อีกตัวอย่างที่คล้ายกันคืออัลกอริทึมสำหรับเปลี่ยนถนนที่เต็มไปด้วยหิมะให้เป็นถนนในฤดูร้อน ซึ่งพัฒนาโดยผู้เชี่ยวชาญของบริษัทเพื่อการฝึกอบรมระบบขับเคลื่อนอัตโนมัติที่มีประสิทธิภาพมากขึ้น
ที่มา: 3dnews.ru