מוכנים? קם הדבר ונהיה!! הצלחתי לפתח טקסט לדיבור *בעברית* עם שכפול קול!! שכפלתי את הקול של בגין וכתבתי סקריפט שמצליח לנהל שיחה בעברית!!

בהדגמה אני מראה שאני מזין טקסט ומקבל את הדיבור בקריינות של הקול ששכפלתי, במקרה הזה כאמור בגין. בפועל כבר הצלחתי גם לייצר קריאות לקלוד ו-OpenAI, גם בטקסט וגם בדיבור, כך שאני יכול לשוחח בעברית ולקבל תשובות בעברית קולית! לא מושלם עד הסוף אבל לא רחוק מזה! וואו!

*יובל אבידני*

אני נוסע ברכבת ואתם מרוויחים: ככה יצרתי את החיבור של טקסט לדיבור בעברית עם קול משוכפל!

1. נקודת ההתחלה היא להעביר טקסט למודל שפה כלשהו. זה יכול להתאפשר על ידי הזנה של טקסט, כמו שהדגמתי, או על ידי דיבור. כן בציור אני מסביר על השלב המתקדם יותר - דיבור.
2. הדיבור צריך להתחבר למודל תמלול. תמלול יכול להתאפשר באנגלית בשפת אמת, או בעברית באמצעות מקטעים. הקלטה - עצירה. שוב הקלטה שוב עצירה. התמלול נתמך בעברית דרך וויספר של OpenAI.
3. התמלול מוזן כפרומפט למודל שפה לבחירתכם, דרך לנגצ׳יין או לא, זה לא חובה, כאן השתמשתי בקלוד בשביל העברית.
4. התבלין הסודי: את התשובה של קלוד העברתי לדיקטה, נקדן, שמנקד אוטומטית את התשובה של קלוד בעברית. הסיבה לכך היא כדי שמודל הטקסט לדיבור יהיה מדויק יותר, מסתבר שהוא עובד טוב יותר בעברית כשמעבירים טקסט מנוקד.
5. הטקסט המנוקד מוזן למודל טקסט לדיבור בעברית. כאן נורא תלוי מה אנחנו רוצים שיקרה - אם אנחנו רוצים קול של דמות שהיא אישה - כאן ניצור קול של אישה, ולהיפך.
6. את קובץ האודיו שקיבלנו אנחנו מעבירים למודל דיבור לדיבור! זה בעצם דורש מאיתנו קודם ליצור שכפול קול של המודל שאנחנו רוצים (מורגן פרימן, אד שירן, יהורם גאון? יונית לוי?), ואז להעביר את ההקלטה הקודמת למודל הזה, שמשנה את הקול הרובוטי לקול של המודל שלנו.
7. אנו מחזירים את התשובה, ההקלטה הסופית, כך שמבחינתנו דיברנו בעברית - וקיבלנו תשובה בעברית עם הקול של הדמות שלנו!

כלים שהשתמשתי בהם:
Streamlit כדי להריח מהר אפליקציה כזו
gTTS או Azure TTS כדי ליצור קובץ בעברית
Elevanlabs כדי ליצור הקלטה של דיבור לדיבור
קלוד / קוהר - כדי לקבל עברית רהוטה (חלילה לכם משימוש בג׳ימיני של קוגל)
והכל על בסיס פייתון כמובן

שמחתי לעזור - ובואו לעקוב!

עדכנו מה חשבתם או אם יש לכם תובנות אחרות שיכולות לייעל את התהליך שמן הסתם יש בו דיליי.

*יובל אבידני*

בואו נבין ב-70 שניות איך AI יוצר תמונות עם דיפיוז׳ן

כשאמרתי שהמיטאפ לקהילה יהיה מטורף, לא בטוח שאפשר לתפוס עד כמה. חשיפת המרצים מתחילה, והנה הראשון, כוכב העל שורף הרשתות, זה שהצליח להטריף את הרשת עם סרטונים ויראליים, כולל כיכוב בארץ נהדרת, זה שוויראליות היא שם נרדף שלו, קבלו אותו - לא אחר מאשר אורי בז׳רנו האגדי!!!

עדיין לא שריינתם? 9.5, 19:30, ת״א. פרטים ופתיחת הרשמה בהמשך. מספר המקומות יהיה מוגבל אז תהיו עם יד על הדופק! הנה הוא מגיע!!!! תרימו לו!!!

Ori Bejerano 🪘 🥁 🥳

הנה הוא מגיע!!! את המרצה הבא כולכם מכירים, הוא לא באמת צריך הצגה, כי דרור גלוברמן הוא אגדה מהלכת, שמו הולך לפניו בכל רחבי תבל. אדם חד כתער, גאון טכנולוגי ומומחה תקשורת מהמעלה הראשונה 😱

אבל נניח את כל האיכויות האלה רגע בצד. כאדם, דרור הוא אדם מדהים, חכם נבון ומצחיק, אחלה גבר וכזה שמדבר בגובה העיניים מבלי להתנשא ויודע לגרום לתחושה הכי בבית בעולם. לצד התכניות הרבות שהוא מוביל, לרבות מחקרי התקשורת שלו כמו הקרב על המוח ועוד, הוא גם מוביל דעת קהל, מרצה ומשפיען בכל רחבי העולם, ואין שמח ומודה ממני על ההסכמה שלו להצטרף למיטאפ ה-AI האגדי שלנו, שיתקיים ב-9.5, בשעה 19:30, במשרדי חברת לושה, מגדלי עזריאלי ת״א (הרשמה תפתח בהמשך, מספר המקומות מוגבל!)

שימו לב להרכב עד כה. תאמינו לי שהליינאפ יהיה מטורף, וזה שדרור מצטרף אליו זה כבוד כל כך גדול עבורנו וזה הזמן להגיד לו תודה רבה, מחכים ומצפים כבר להרצאה המרתקת שלו!

יאללה בלאגן! קדימה הרמות!!! 🔥🎉🔥🎉🔥🎉

Dror Globerman
Ori Bejerano
Shelly Or

שבוע טוב עם חשיפה של מרצה נוסף במיטאפ שלנו 🤯🤯🤯

והפעם, לא אחר מאשר האדם שהכישרון שלו כל כך ייחודי, עד כדי כך שהוא החלוץ שהצליח להשתמש בכלי AI כדי ליצור סרטונים מרהיבים ברמות שלא נראו, מה שגרם לתקשורת לעוף עליו, לרשת להסתער עליו, ולחברת PIKA לגייס ולהטיס אותו מתל אביב לעבוד בעמק הסיליקון, להוביל בכנסים, לפרוץ דרך ולהיות בחזית!! עד כדי כך!!

זה סיפור על מתן כהן גרומי, בחור מדהים, מוכשר ברמות, צנוע, עם ניסיון אדיר מחברת ההפקות שלו עצמו, אבל גם עם סיפור מרתק שאני לא יכול לחכות כבר להקשיב לו. במקרה זכינו לתפוס את מתן כשהוא בגיחה בארץ, ולשמחתי הוא הסכים להגיע למיטאפ, ולספר את הסיפור שלו על המהפכה שהוא עבר, אבל לא פחות - שהוא בעצמו הוביל ומוביל בכל רגע!

פיקה היא החלוצה בתחום הנפשת תמונות, מאז שמתן התחיל שם, הוסיפו יכולות מטריפות כמו הרחבת איזור ההנפשה, עריכת אלמנטים בסרטונים קיימים, הוספת אפקטים של סאונד ואפילו ליפסינק (עוד לפני Runway)!!

אז איך אומרים בשנות ה-80? עושה הרבה הרבה כבוד בשביל Matan Cohen-Grumi האדיר! איזה ליינאפ השם!!! כמה עוד מחכה לנו!!

נחשפו עד כה:
Ori Bejerano
Shelly Or
Dror Globerman

שיהיה לנו שבוע טוב ומיטאפ אולסטארס מהחלומות! ותודה לך מתן!

כמה חיכיתם, כמה שאלתם, והנה היא הגיעה: המרצה החמישית שפשוט אי אפשר בלעדיה, לא אחרת מאשר Dana Israeli אושיית העל!!!! 💫

דנה היא כזו שלא תציף את הפיד או את הקהילה שלה 100 פעם ביום, היא תעלה תוכן סופר מיוחד בקצב שפשוט עושה חשק בלתי נפסק לעוד. כל פוסט של דנה הוא פוסט מלוטש, יפהפה, מלא באיכות ותוכן ואי אפשר שלא לרצות לצפות, לעקוב, לקרוא, ובגדול לרצות לדעת את כל מה שהיא יודעת! ולא פחות חשוב מזה - את הצורה הכל כך מגרה באיך שהיא מנגישה את התוכן האיכותי שלה!

דנה היא כבר שנים מהמובילות בתחומי העיצוב והיצירתיות, היא אנימטורית בחסד, אמנית סטופ מושן מהרמות הגבוהות ביותר, כזו שתחת ידיה עברו מאות רבות ואלפים של תלמידים ותלמידות, בלייב, בזום, פיזי, ומה לא. היא אושייה של ממש עם מעל 40 אלף עוקבים רק באינסטגרם, מפרגנת, מחוזרת על ידי ארגונים בכל רחבי הארץ, ולמרות כל זה - הסכימה להכניס את המיטאפ ללו״ז הפסיכי שלה ולהצטרף לליינאפ, ולהוסיף עוצמה פסיכית ותוכן שכולו מזוקק זהב טהור!

מי שמכיר מבין על מה אני מדבר, ומי שלא (אם בכלל קיים כזה) - כדאי שיוסיף עוקב ויפה שעה אחת קודם! מרגש לעמוד בבמה לצידה, והכבוד כולו שלנו!

מספר 5, קבלו את דנה ישראלי!!!!!! 👏 🤩

מתנה לפסח: Artflow AI החליטו שאני משפיען ונתנו לי לינק אפיליאציה שנותן למי שנרשם דרכי אקסטרה 50 קרדיטים ועל הדרך כמה גרושים עבורי 🤑

כדי לקבל את הקרדיטים וההנחה היכנסו להרשמה דרך הקישור הזה: https://app.artflow.ai/auth/register?via=yuval

ולגבי ארטפלואו: פלטפורמה מדהימה, אפשר לאמן מודלים בקלי קלות, והחוזק שלה הוא ליצור וידאו מהתמונות שיוצרים (כולל ליפסינק!), הם לא מתחרים במידג׳רני ושות׳ אבל יש להם יכולות על ואני באמת ממליץ עליהם בחום.

פסח כשר ושמח לכולנו!

נ.ב: זו תמונה שיצרתי בארטפלואו עם מודל שאימנתי על תמונות שלי

מוזמנים לקרוא את המאמר שלי על מה זה Fine Tune של מודל שפה גדול, מתי משתמשים בו ולמה בכלל.

מועדים לשמחה חגים וזמנים לששון!

https://yuv.ai/fine-tune-llms.html

שנה וחצי אחרי פרסום ChatGPT: פותחו מאות / אלפי כלים שמתחברים למודל שפה בדרך כזו או אחרת

האם באמת, שנה וחצי אחרי, יש לנו כלים פרקטים ושימושיים למשימות היום יום? הנה כמה מחשבות:

- בתחום הגרפיקה אנחנו רואים מהפכה של ממש, כל מה שקשור ליצירת תמונות ואפילו סרטונים אכן משמש פרקטית להמון דברים כמו פוסטים פרסומיים לסושיאל, עריכת אלמנטים בתמונות קיימות, יצירת פרסומות או חומרי עזר גרפיים למצגות - כלים חינמיים מובילים: אידאוגרם, קליפ דרופ, פיירפליי, ארטפלואו, פיקה במסלול החינמי
- ⁠בתחום המוזיקה - היכולות של סונו ליצור שירים מטקסט גם נותנים ערך אדיר ליצירת מוזיקה שמלווה סרטונים לסושיאל או סתם לצרכים אחרים, נוסיף לזה יכולות החלפת קול לקולות של זמרים וזה ממש מעניין. כלים חינמיים שימושיים: replay, weights.gg, suno.ai
- ⁠מצגות - כלים כמו Gemma או copilot של מייקרוסופט מאוד נחמדים ליצירת שלד למצגות, לגמא יש אפשרות חינמית, לקופיילוט לא אבל הוא ממש מגניב
- ⁠סיכום ותמלול - פה לדעתי יש מהפכה, בין אם זה שימוש נקי במודלים של וויספר או כל מודל אחר, כמו שילוב של קופיילוט בטימס / שימוש בסיכום דרך זום, מקל על החיים
- ⁠שירות לקוחות - במקום לקודד שאלות ותשובות, זה כיף שאפשר לקבל סוכן AI שמבין את ההקשר ויודע לענות, זה נחמד אבל הכח האמיתי הוא בחיבור למערכות אחרות כמו סיילספורס, CRM אחרים למיניהם
- ⁠בוסט של אוטומציות - החיבור של מודל שפה לזאפייר מאפשר שדרוג משמעותי של אוטומציות, כמו יצירת תוכן אוטומטי שמתעדכן לבד ברשתות ומקדם אורגנית ערכים
- ⁠כתיבת קוד - תשאול של ChatGPT לגמרי עוזר עם כל מה שקשור לקוד

מה עוד לא ברור לנו עד הסוף אם שימושי או לא:
* אוואטרים - האם יש שימוש פרקטי לאוואטר דיגיטלי? האם באמת יש ערך לכך?
* ⁠סוכני AI שמשיבים על מסמכים - כמה זה באמת פרקטי למשהו? האם באמת מישהו טען מסמך ותשאל עליו יותר מ-2 שאלות?
* ⁠צוות של סוכני AI שמשתפים פעולה ביניהם - מרגיש נחמד אבל לא מובן עדיין עד הסוף מה היתרון הגדול בזה. מעין ניסיון ליצור בינה מלאכותית כללית אבל זה לא באמת שונה מהגדרות של סוכנים נפרדים כרגע, אולי קצת אבל לא ברמה מפילת לסת.
* ⁠חיבור סוכנים למאגרי ידע - עדיין מרגיש שלא שם עד הסוף, התשובות לא מספיק מדויקות או אפויות לטעמי, ו Fine Tune עובד טוב יותר אך יכול להיות מורכב יותר

יש עוד המון מה לכתוב אבל אלה התובנות העיקריות שלי נכון למועד כתיבת שורות אלה. מקווה שקיבלתם ערך!

מועדים לשמחה,
*יובל אבידני*

מרגישים את רעידת האדמה? זה המרצה האחרון במיטאפ, לא אחר מאשר ארז רובינשטיין הסופרסטאר בכבודו ובעצמו!! 🔥🔥🔥

אני לא בטוח שארז צריך הצגה מקדימה אבל רק לטובת מי שאולי איכשהו בטעות בשוגג לא נחשף לתוכן שלו, ארז הוא פשוט גאון בלמצוא כלי AI מגניבים ולהפוך את ה-AI לדבר הכי כיף שאפשר להשתמש בו. ההרצאה שלו, שרצה תחת הסלוגן ש AI הוא פאן משנה חיים, מדויקת כל כך למי שהוא. אני מקנא ביכולות שלו להקליל כל כלי, להצחיק בקלות ובשנינות עם אפס מאמץ, להצליח לקבל גישה לכלים עוד לפני שהמפתחים שלהם בכלל פיתחו אותם.

ארז יצר איתי קשר עוד בתחילת התפוצצות הבינה, וכיאה לארז, הרעיון הראשון (והצנוע) שלו היה להוביל משהו ענק בכפר המכבייה. כזה ארז. עף למעלה חולם בגדול כובש יעדים, ב-19.5 הוא גם הולך להרצות בזאפה (כדאי לכם לשריין כרטיסים, הנאה מובטחת!), הוא ממלא אולמות, מרצה מאוד מאוד *מאוד* מבוקש בארץ, כיף גדול לשמוע אותו, התכנים שלו ברשת מתפוצצים עם מאות אלפי צפיות, כמות אדירה של עוקבים, ואת כל זה הוא מצליח לקדם בדרך מיוחדת שפשוט כיף לראות וכיף לעקוב אחריו. הוא כל כך מקסים ושנון ומצחיק שאי אפשר שלא לאהוב.

אגב, הוא גם התראיין בתקשורת לא מעט על בינה מלאכותית, היה קמפיינר מוביל גם אצל פוליטיקאים (לא אציין איזה), אבל הוא באמת מגה סטאר מיוחד וכבוד אדיר שהוא אצלנו במיטאפ. אז הנה, ההרכב המלא נחשף, תחזיקו חזק כי קישור להרשמה ייפתח בימים הקרובים ויישלח בקהילת הוואצאפ שלי בלבד.

מספר המקומות מוגבל ומצומצם מאוד, 120 בלבד, כך שמדובר במיטאפ בוטיקי של מרצי האולסטאר של הבינה שבאים במיוחד לקהילת YUVAL AI.

תחזיקו חזק, זה מתקרב!
שבוע טוב ומועדים לשמחה 🔥

Erez Rubinstein
Shani Burshtein
אברהם יצחק מאיר
Ori Bejerano
Shelly Or
Dana Israeli
Avihai Eliasi
Matan Cohen-Grumi
Dror Globerman

הדגמה: תמלול בזמן אמת עם DeepGram + מענה ממודל השפה מיקסטרל באמצעות GROQ (הפלטפורמה המהירה בעולם) + קבלת המענה של מודל השפה גם בקול משוכפל של מורגן פרימן באמצעות חיבור ל-ElevanLabs, בעצם יש פה שעטנז של API שהצלחתי ליצור.

חוץ ממירוץ להספיק לרכבת (הספקתי, תודה אשתי היקרה!) - הבוקר נפתח בטוב עם גישה שקיבלתי ל Devin כסוקר טכני, מה שאומר שקיבלתי גישה גם לכלי וגם לערוצי הסלאק של החברה, כולל לעדכונים וליצירת קשר עם המפתחים המייסדים וכל העובדים. ה-Slack נראה פעיל ורציני, הסתכלתי בדיונים ונראה שלא פראיירים שם בכלל, לא יכול לחכות לנסות ולעדכן אתכם. איזה בוקר!

רקע: לאחרונה פורסם על Devin, מהנדס התוכנה הראשון שכולו בינה מלאכותית, שיודע לאתר שגיאות בקוד ואף לפתור אותן בעצמו בצורה מחזורית כך שלכאורה מתכנת/ת מתייתרים פה. אעדכן אם אכן כך.

*יובל אבידני*