באתר הישראלי Act AI פורסם מבזק טכנולוגי מקצועי הסוקר את טכנולוגיית ה-Tone Transfer (המבוססת על מודלי DDSP - Differentiable Digital Signal Processing) ואת השפעתה המהפכנית על הפקות באולפן.
הפיתוח מאפשר לקחת הקלטת שירה אנושית, זמזום, נגינת גיטרה או כל חפץ אקוסטי המפיק צליל, ולהמיר אותם לכלי נגינה וירטואלי מלא (כמו חליל, סקסופון, צ'לו או כינור) בריאליזם חסר תקדים. בניגוד למגבלות המוכרות של המרת אודיו ל-MIDI ושימוש בסמפלרים מסורתיים (אשר מאבדים את הדינמיקה והניואנסים הקוליים של הנגן), מודל ה-Tone Transfer לומד את הגוון וההתנהגות האקוסטית של הכלי ומייצר את כל פרטי הביצוע הטבעיים בזמן אמת – כולל רעשי קשת על גבי מיתר, נקישת שסתומים בכלי נשיפה, שינויי ויברטו ונשימות.
הטכנולוגיה זמינה כעת כפלאגין עבודה חי הנטען ישירות בתוך ה-DAW ומאפשרת למפיקים לנגן תפקידים וירטואליים מורכבים בקולם האישי או באמצעות גיטרה, ללא צורך בידע בנגינה על כלי נשיפה או קשת.
מקור:
מטורף! שילוב של בינה מלאכותית עם פלגין, מאפשר המרת קול (וכל צליל) לכלי נגינה