זו לא תמונת AI! וזה פוסט קצת אחר, שיוצא לי מבפנים: אל תחכו ש״יגיע הזמן הנכון״, החיים קצרים והוא אף פעם לא מגיע. מה כן? תיזמו את מה שחשוב לכם להגשים. צרו את המציאות שלכם.

https://x.com/yuvalav/status/2036861922201493786?s=46&t=ntqg6EvTkrQ0ESa81IKf6A

קלוד שולט לי על המחשב וגם מפתח לי משחק תלת מימדי *בתוך תוכנת Unity* (ה-תוכנה לפיתוח משחקי תלת מימד)!! 😍

https://youtu.be/HjJ9NxYoy24

קלוד הגנב: הוא פיתח לי תוסף לדפדפן שיודע למצוא קבצי מקור נעולים - ולהוריד אותם בכוח. לדוגמא, תוכנת Meshy מייצרת מודלים תלת מימדיים מתמונת רפרנס, אבל אפשר לייצא את המודל (קובץ glb) רק אם יש מנוי בתשלום. במקרה הזה, קלוד בנה תוסף שמאתר את קובץ המודל בעצמו - ומוריד אותו גם בלי מנוי. FYI - @MeshyAI

קלוד חוסם שימוש זדוני כברירת מחדל, אבל כיוון שיש גבול מאוד דק בין "שימוש זדוני" לבין "שימוש לגיטימי לצורכי בדיקות", מאוד קל לבצע מניפולציות ו"לבוא בהפוכה", ואז קלוד מבצע את מה שרצינו. כמו בדוגמא הזו, לא אמרתי שאני רוצה "לגנוב" קבצים שצריך לשלם עליהם כדי להוריד, אלא הסברתי שיש פה מקרה של בדיקות שאני מבצע על מודלים שאני משתמש בהם, ועלי לבצע בדיקות בקובץ המקור עצמו אבל שאני לא מצליח לאתר אותו - וביקשתי עזרה.

קלוד הגנב לקח את זה משם. אבל השאלה היא: האם קלוד הוא הגנב? או שאני עשיתי משהו לא בסדר והאשמה היא עלי?

הרצוי והמצוי. יצרתי הדמיה של משחק שאני רוצה לפתח עם AI שמלמד על חיות בר באמצעות משימות בסביבה תלת מימדית יפהפייה. בפועל, חיברתי שרת MCP של Unity לקלוד דסקטופ שיצר לי את המשחק שרואים בתמונה השניה.

מצד אחד, אכזבה. הפער בין ההדמיה לבין מה שקיבלתי - עצום.

מצד שני, אני חי בסרט כשאני חושב שעל הפעם הראשונה אפשר לקבל משחק כזה עם AI.

האמת? אם אני מסיר רגע את הבאסה הראשונית, זה די מדהים שקלוד ממש נצמד לעקרונות. המפה בצד ימין למטה, ההודעות שעל המסך בפינות העליונות, וגם בעלי החיים - בהתחלה הוא יצר דמויות כלליות כאלה, זה היה גרוע, ואז אמרתי לו שאני רוצה דמויות אמיתיות, אז הוא חיפש באינטרנט מקורות שמאפשרים להוריד בחינם קבצי תלת מימד, חלק הוריד לבד וחלק אמר לי להוריד בעצמי ונתן לי קישור (כי הוא לא הצליח לבד), ולבסוף הוא יצר את המשחק הזה - גם בסביבת Unity וגם עם ThreeJS.

אני לא מוותר בקלות, ואני יוצא למסע של פיתוח המשחק הזה.

הבעיה היא שלא מצאתי הסברים ברורים ונגישים, ותוכנות יצירת המשחקים נראות איומות ונוראיות, מורכבות להחריד. אבל! למרות שאין לי שום ידע וניסיון בפיתוח משחקי תלת מימד, קלוד הסביר לי את הבסיס, דילגתי בין סרטוני יוטיוב כדי להבין את המהות, ועכשיו אני מבין את מונחי היסוד, וכמו כל פיתוח רגיל, עובד על זה בשלבים עם קלוד קוד (הפעם דרך קלוד דסקטופ בשביל האתגר), ומסקרן ממש לאן אצליח להגיע.

אגב, גרוק וקלוד המליצו לי פה אחד על Unity למרות שתכננתי בכלל על Unreal, אז הקשבתי להם. אם למישהו\י יש ניסיון בפיתוח משחקים אשמח לקבל את ההמלצות. שבוע טוב לכולם 🤍

כמה מרגש לראות את קלוד דסקטופ מפעיל את קלוד קוד שמפעיל את תוכנת בלנדר ליצירת דמויות תלת מימדיות, שולט על התוכנה, והקסם האמיתי בעיני הוא ש:

‏בניסיון הראשון הוא יצר אריה מאפס. אמרתי לו שלא אהבתי - אז הוא התחיל מחדש לבד, חיפש באינטרנט מודלים קיימים של אריות שאפשר להוריד בחינם, בדק מה הכי מתאים והוריד, ואז שינה את הצבע של האריה ללבן כי זה מה שביקשתי, וביצע את יתר ההתאמות לבד 🤯

‏נכון שה-MCP של בלנדר קיים כבר זמן רב, אבל זו פעם ראשונה שאני מנסה אותו בעצמי, וגם לא היינו יכולים להשתמש בו מתוך קלוד קוד שבתוך קלוד דסקטופ (כי לא היה לנו קלוד קוד בתוך קלוד דסקטופ עד לא מזמן יחסית)

עוד לגבי תלת מימד ו-AI: טקסטורה וריג!!!

כדי ליצור דמות תלת מימדית, אפשר לפסל אותה לבד בתוכנה כמו בלנדר בשילוב שרת MCP, התוצאה סבירה. אפשרות נוספת היא לגשת לאתר כמו Tripo או Meshy, ששם אפשר לקבל מודל תלת מימד מטקסט או תמונה.

הבעיה היא, שמקבלים דמות לבנה בלי צבע ובלי טקסטורה נורמלית. מסתבר שמשי פותרים את זה ויש כפתור Texture שלוקח את הצבעים מתמונת הרפרנס והופך את המודל החיוור לצבעוני ועם טקסטורה מדויקת! כך למשל, הצ׳יטה היפה שלי, הפכה ליפהפיה במקום סתם לבנה.

לאחר מכן יש כפתור נוסף בשם Rig, שלוקח את המודל הצבעוני היפה ובונה לו שלד כדי שנוכל להנפיש אותו ולגרום לו ללכת, לשבת, לקפוץ ולנוע!

אם לא משתמשים בזה במשי, אפשר לעשות את זה גם בבלנדר עם MCP אבל זה יכול להיות טיפה יותר מאתגר.

לבסוף, לוקחים את המודלים השונים, שעומדים הולכים רצים וכו לכלי כמו Unity ומחברים MCP כדי לבנות משחק עם המודלים וממש לשחק ולנוע במרחב, וגם זה עם AI כמובן!

אני מגלה עולם שלם, צולל אליו ולומד אותו מאפס, ומרתק לראות ולגלות בידיים כמה ה-AI מנגיש את העולם הלא נגיש הזה לכולם!

איך תיראו במהלך כל חייכם? זה מה ששאלתי את ננו בננה פרו 2 - וזה מה שקיבלתי.

פרומפט: צור חיזוי התבגרות לדמות בתמונה המצורפת, לכל עשור, מגיל 0 ועד גיל 120, ותוודא גם להוסיף התייחסות לשירות בצה״ל בגיל 18.

מה יצא לכם? 🤣

ה-AI בעולם הפיזי זה אחד הדברים הכי טובים שקרו לנו. אנשים מדפיסים בתלת מימד מודלים שהם יצרו עם AI, לכל מיני שימושים. כאן, מישהי יצרה עם Meshy AI תמונה של עגילי כלב עם ננו בננה, והדפיסה בתלת מימד והוסיפה סיכות של עגילים. אין מרתק כזה!

רק תחשבו כמה שימושים יש לזה. אתמול ראיתי בקניון מכונות משחק לילדים שכל הפרסים הם צעצועים תוצרי מדפסת תלת מימד.

או אנשים שמדפיסים קליפסים שמחזיקים אריזות מזון פתוחות, בקבוקים לתינוק, אביזרים לרכב וכל מיני כאלה.

המזל שלנו הוא שהכלים הופכים לטובים הרבה יותר, ובמקביל גם כלים שהם קוד מקור פתוח משתכללים, ואני חושב שבזכות קהילת קוד המקור הפתוח - אנחנו זוכים ליהנות מכל הטוב הזה. אלמלא הקהילה, החברות המסחריות היו חוגגות עלינו פי מיליארד.

יצא לכם לייצר מודל ב-AI דרך ננו בננה ואז להדפיס משהו בתלת מימד? אם כן, אשמח להמלצה על מדפסות תלת מימד להתנסות ביתית 😏

קבלו איך ה-AI עזר לי לקחת תמונה אמיתית - להפוך אותה למודל תלת מימדי צבעוני עם אנימציה - ואז גם להפוך את כל זה למשחק תלת מימדי!

פירוט טכני: השתמשתי בננו בננה ליצירת תמונה שתתאים למידול תלת מימד, לאחר מכן השתמשתי במשי @meshy.ai כדי למדל, ולבסוף חיברתי את קלוד קוד מתוך קלוד דסקטופ ל-MCP של Unity (שרת שנקרא Coplay)

לא יודע אם רק אני בטירוף או שזה באמת מטורף, אבל וואו! ו בעיקר - כמה כיף ללמוד במהירות האור עם AI! 😮

https://youtu.be/k1HjXgl5BHI

המהפכה שמתחוללת גם בעולם הפרודקט: אתמול נפגשתי עם דירקטורית בכירה מעולם המוצר, תוך כדי הפגישה היא מראה לי שהיא הקימה סוכנים, בנתה אוטומציות, משתמשת בוייב קודינג ואפילו בקלוד קוד בטרמינל. זה גרם לי להבין 2 דברים:

1. לא צריך כבר לפתח ממשקים או מוצרים לכל דבר. זה פשוט מיותר. לדוגמא, למה לפתח אתר שמאפשר לנו לבצע פעולות כמו מענה על תוכן של מסמכים - אם מודל חזק של קלוד או נוטבוק LM יכול לעשות את זה בלי לפתח כלום?

תחום המוצר עובר גם הוא מהפכה וטלטלה. למה להשקיע ככ הרבה זמן באיפיון מוצרים, ניתוח חווית משתמש, אינספור פגישות, כדי לפתח ממשק שכנראה אפשר להחליף אותו בקלות בקונקטור או סקיל לקלוד או לGPT? בשביל מה להתאמץ בכלל? חבל על הזמן. התחום הקלאסי של הפרודקט פשוט לא רלוונטי כבר. וזה לא רק אני חושב ככה, זה בכירות ובכירים במשק מהתחום הזה שאני פוגש שאומרים את זה.

2. מי שיש לו בארגון את האקוסיסטם של מייקרוסופט קופיילוט - חייבים להשתמש ב-Flows או ליצור סוכן מותאם אישית כדי להתחבר למידע הארגוני בצורה מאובטחת. זה זהב טהור. אנשים מתוסכלים על זה שאין קלוד - כשבפועל יש להם זהב טהור בידיים שאושר על ידי אבטחת מידע ומתחבר לכל המידע הארגוני: סיילספורס, אאוטלוק, טימס, שרפוינט, ג׳ירה ועוד!

קופיילוט סטודיו, וגם Flows, הם כלים שמאפשרים להגדיר אוטומציות כמו סיכום יומי אוטומטי של מה שקרה במייל בזמן שהיינו בחוץ, ועוד המון דברים. פרודוקטיביות במקסימום!

ולבסוף, אני רואה יותר ויותר דירקטורים ו-VPs שמשתמשים בקלוד קוד, גם אם הם/ן לא טכניים, ומפתחים לעצמם MVP. זה ממחיש להם מה קורה בעולם, ואז הם יודעים מה לדרוש מהצוותים כי הם מחוברים לשטח.

בגדול, אם בעבר כשהייתי נפגש עם פרודקט הייתי יודע שזה לא אנשים טכניים במהות - היום, כל פגישה עם פרודקט הם מראים לי קודם כל מה פיתחו עם קלוד קוד - ורק אחרי זה מתחילים את הפגישה 🤯

ומה עמדתכם על מה שקורה בתחום הפרודקט? מה לדעתכם חשוב לדעת בו? מאוד אשמח לקרוא, ויש גם המון מנהלי ומנהלות מוצר שיעקבו פה אז נשמח לקבל תובנות ❤️🙏