המגוון העצום של כלי בינה מלאכותית של OpenAI ממשיך לגדול.
חברות מחקר ופריסה של בינה מלאכותית (AI), כמו OpenAI, משחררות ללא הרף תכונות לטובת האנושות. בנוסף ל-ChatGPT, DALL-E, Point-E וכלים מוצלחים אחרים, OpenAI שחררה את Shap-E, דגם חדשני חדש.
אז מהו ה-Shap-E של OpenAI, ומה הוא יכול לעשות עבורך?
מהו ה-Shap-E של OpenAI?
במאי 2023, אלכס ניקול והיוון ג'ון, חוקרים ותורמים של OpenAI, פרסמו נייר המכריז על Shap-E, החידוש האחרון של החברה. Shap-E הוא כלי חדש שאומן על מערך נתונים עצום של תמונות וטקסט תלת-ממדיים מותאמים שיכולים ליצור מודלים תלת-ממדיים מטקסט או תמונות. זה דומה ל DALL-E, שיכול ליצור תמונות דו-ממדיות מטקסט, אבל Shap-E מייצרת נכסי תלת מימד.
Shap-E מאומן על מודל דיפוזיה מותנה ומיפוי נכסים תלת מימדיים. מיפוי נכסי תלת-ממד פירושו ש-Shap-E לומד לשייך טקסט או תמונות למודלים תלת-ממדיים מתאימים מתוך מערך נתונים גדול של אובייקטים תלת-ממדיים קיימים. מודל דיפוזיה מותנה הוא מודל מחולל שמתחיל מגרסה רועשת של פלט היעד ומשכלל אותו בהדרגה על ידי הסרת רעשים והוספת פרטים.
על ידי שילוב שני המרכיבים הללו, Shap-E יכול ליצור מודלים תלת מימדיים מציאותיים ומגוונים התואמים לקלט הטקסט או התמונה הנתון וניתן לצפות בהם מזוויות ותנאי תאורה שונים.
איך אתה יכול להשתמש ב-Shap-E של OpenAI
Shap-E לא פורסם לציבור כמו כלים אחרים של OpenAI, אבל משקל הדגם, קוד ההסקה והדוגמאות שלו זמינים להורדה ב- Shap-E GitHub עמוד.
אתה יכול להוריד את קוד Shap-E בחינם ו התקן אותו באמצעות הפקודה Python pip במחשב שלך. אתה צריך גם NVIDIA GPU ומעבד בעל ביצועים גבוהים, שכן Shap-E הוא עתיר משאבים.
לאחר ההתקנה, פתח את התמונות התלת-ממדיות שאתה יוצר ב-Microsoft Paint 3D. כמו כן, אתה יכול להמיר את התמונות לקבצי STL אם אתה רוצה להדפיס אותם באמצעות מדפסות תלת מימד.
אתה יכול גם לדווח על בעיות ולמצוא פתרונות לבעיות שכבר העלו אחרים בדף Shap-E GitHub.
מה אתה יכול לעשות עם ה-Shap-E של OpenAI
Shap-E מאפשר לך לתאר רעיונות מורכבים באמצעות ייצוג חזותי של רעיונות. היישומים הפוטנציאליים של טכנולוגיה זו הם בלתי מוגבלים, במיוחד מכיוון שלוויזואליות יש בדרך כלל אפקטים מרגשים הרבה יותר מאשר טקסטים.
כאדריכל, אתה יכול להשתמש ב-Shap-E כדי ליצור מודלים תלת מימדיים של מבנים ומבנים על סמך תיאורים כתובים. ניתן לציין את המידות, החומרים, הצבעים והסגנונות של המבנים באמצעות משפטים פשוטים. לדוגמה, אתה יכול להנחות אותו עם: "צור גורד שחקים עם 60 קומות ומעקות זכוכית," ולייצא את התוצאה(ות) לתוכנה אחרת לעריכה נוספת אם אתה אוהב את התוצאות שאתה מקבל.
גיימרים ואמני אנימציה יכולים לשפר סביבות וירטואליות וחוויות חזותיות על ידי יצירת אובייקטים ודמויות תלת-ממדיות מפורטים. בהנדסה, אתה יכול לתאר רכיבים, מפרטים ופונקציות של מכונות וציוד ולקבל את התוצאות במודלים תלת מימדיים לפני יצירת אבות טיפוס פיזיים.
יתרה מכך, אפילו בתחומים כמו חינוך, Shap-E יכולה לעזור למחנכים להעביר רעיונות מורכבים ומופשטים לתלמידיהם בנושאים כמו ביולוגיה, גיאומטריה ופיזיקה.
למרות שזו עדיין עבודה בתהליך, Shap-E היא צעד לפני זה של OpenAI נקודה-ה, אשר מייצר ענני נקודות תלת מימדיים על סמך הנחיות טקסט. ענני הנקודה מוגבלים בהבעה וברזולוציה שלהם, ולעתים קרובות מייצרים צורות מטושטשות או לא שלמות.
צור מודלים תלת מימדיים באמצעות ה-Shap-E של OpenAI
Shap-E הוא הדגמה מרשימה של כוחה של AI ליצור תוכן תלת מימדי משפה או תמונות טבעיות. בעזרתו תוכלו ליצור אובייקטים תלת מימדיים למשחקי מחשב, חוויות VR אינטראקטיביות, אבות טיפוס ושאר מטרות. למרות שאין הבטחות לגבי איכות הפלט, מודל AI מספק לך דרך מהירה ויעילה ליצור מודל תלת מימד של כל דבר.
חוץ מזה, מודל בינה מלאכותית זה מהווה תרומה חשובה במרחב הלמידה העמוק וככל הנראה יוביל לחידושים ויצירות מתקדמים בעתיד.
