חברת Meta השיקה היום את AudioCraft - בינה מלאכותית ליצירת קטעי מוזיקה ואודיו. AudioCraft מורכבת משלושה מודלי בינה מלאכותית שונים: MusicGen (מודל הזמין לשימוש ציבורי, מייצר מוזיקה לפי הנחיות טקסט, ואומן עם מוזיקה בבעלות Meta וברישיון ספציפי), AudioGen (מודל המייצר קטעי אודיו על בסיס הנחיות טקסט), ו-EnCodec (מפענח המאפשר ליצור ולקמפרס מוזיקה באיכות גבוהה ביעילות). 

החברה גם משחררת הערב בקוד פתוח את כל משפחת מודלי AudioCraft - הכוללים גרסה משופרת של המפענח EnCodec, את כל מודלי AudioGen המאומנים שמאפשרים לאנשים ליצור סאונד ואפקטים קוליים (כמו כלב נובח, מכוניות צופרות או צעדים על רצפת עץ), וכן את הקוד והפרמטרים של כל מודלי AudioCraft. חברת Meta גם תעניק לחוקרים ולאנשי מקצוע בתחום גישה למודלים הללו - כדי שיוכלו לאמן את המודלים שלהם עם מערכי הנתונים ולקדם את תחום האודיו והמוזיקה שמייצרת בינה מלאכותית.

בעוד שבתקופה האחרונה נרשמו התרגשות והתקדמות רבה סביב מודלי AI היוצרים תמונות, וידאו וטקסט - נראה היה שהאודיו עדיין נותר מעט מאחור. חלק מהעבודה שנעשתה בתחום כבר נמצאת בחוץ, אבל היא עדיין מסובכת מאוד לשימוש ואינה פתוחה מספיק.
 

🎵 Today we’re sharing details about AudioCraft, a family of generative AI models that lets you easily generate high-quality audio and music from text.https://t.co/04XAq4rlap pic.twitter.com/JreMIBGbTF

— Meta Newsroom (@MetaNewsroom) August 2, 2023

עוד ב-

ספוטיפיי מבצעת את דריסת הרגל שלה בתחום הבינה המלאכותית

לכתבה המלאה

לצד זאת, מוזיקה היא ללא ספק סוג האודיו המאתגר ביותר ליצירה. לכן, Meta סבורה שבסיס משמעותי של קוד פתוח יעודד חדשנות וירחיב את הצורה שבה אנחנו צורכים ויוצרים מוזיקה. עם אפשרויות וכלים נוספים, MusicGen יכול להפוך לסוג חדש של כלי נגינה בעצמו, ממש כמו הסינתיסייזר בראשיתו, ומשפחת המודלים כולה יכולה לשמש כלי משמעותי בידיהם של מוזיקאים ויוצרים.