هنرمندان هوش مصنوعی در جشنواره جاز جارسوم به اجرای موسیقی بداهه پرداختند
یادداشت | نام هیون-وو
انتشار: ۱۶ اکتبر ۲۰۲۶، ساعت ۱۱:۰۵ به وقت کره (KST)
به‌روزرسانی: ۱۶ اکتبر ۲۰۲۶، ساعت ۱۱:۴۳ به وقت کره (KST)
مدل‌های هوش مصنوعی که توسط تیم پژوهشی به سرپرستی نام جو-هان، استاد مؤسسه پیشرفته علم و فناوری کره (KAIST)، توسعه یافته‌اند، در یکی از جشنواره‌های مهم جاز کره جنوبی به روی صحنه رفتند و در کنار هنرمندان انسانی به اجرای جاز بداهه پرداختند.
این دانشگاه روز جمعه اعلام کرد تیم پژوهشی در بیست‌وسومین جشنواره جاز جارسوم، که از ۹ تا ۱۱ اکتبر در شهرستان گاپیونگ در استان گیونگ‌گی برگزار شد، فناوری همکاری موسیقی انسان و هوش مصنوعی را به نمایش گذاشت. این فناوری جریان اجرای نوازندگان انسانی را در لحظه تحلیل می‌کند و به هوش مصنوعی امکان می‌دهد در بخش‌هایی از اجرا جای نوازنده را بگیرد یا همراهی بداهه تولید کند.
در مجموع، ۱۲ هنرمند جاز انسانی در این رویداد حضور داشتند و در ۱۲ اجرا و ۲۶ قطعه با هوش مصنوعی همکاری کردند.
این فناوری با خدمات رایج هوش مصنوعی موسیقی تفاوت دارد، زیرا امکان همکاری با نوازندگان انسانی را در موسیقی جاز، که ژانری مبتنی بر بداهه‌نوازی است، فراهم می‌کند.
نوازندگان جاز اغلب بر اساس حال‌وهوای لحظه‌ای خود سرعت اجرا را تغییر می‌دهند یا ملودی‌های تازه‌ای می‌سازند. از آنجا که یک قطعه ممکن است هر بار به شکلی متفاوت اجرا شود، نوازندگان باید به یکدیگر گوش دهند و متناسب با تغییرات اجرای هم‌نواختان خود، شیوه نوازندگی‌شان را تنظیم کنند. بنابراین، هوش مصنوعی برای مشارکت در اجرای جاز باید فراتر از پخش موسیقی از پیش ساخته‌شده عمل کند و بتواند به نوازندگان انسانی گوش دهد و به تغییرات اجرای آنها پاسخ دهد.
این تیم دو مدل هوش مصنوعی را معرفی کرد: مدل نوازنده پیانو با نام «اسکات» و مدل همراهی‌کننده‌ای به نام «دیپ‌پاکت».
اسکات اجرای نوازندگان انسانی را در لحظه با نت موسیقی مقایسه می‌کند تا در زمان مناسب وارد اجرا شود و سولوی تازه‌ای متناسب با ملودی‌ها و ریتم‌های نوازندگان تولید کند.
موسیقی تولیدشده توسط اسکات به یک پیانوی آکوستیک بازتولیدکننده یاماها دیسکلاویر منتقل شد؛ این ساز موسیقی را با حرکت واقعی کلاویه‌ها و پدال‌ها اجرا کرد. در صحنه نیز یک شخصیت واقعیت افزوده روی تصاویر زنده دوربین قرار گرفت که حرکات آن بر اساس داده‌های حرکتی تولیدشده با فناوری شبیه‌سازی حرکات دست یک پیانیست بود.
دیپ‌پاکت اجرای نوازندگان انسانی را تحلیل می‌کرد و در لحظه، همراهی پیانو، باس و درامز تولید می‌کرد و خود را با نت‌ها، ریتم و سرعت اجرای آنها تطبیق می‌داد. این سامانه در کنار پیانیست‌ها و گیتاریست‌ها بدون هیچ آماده‌سازی قبلی موسیقی تولید می‌کرد و به‌طور پیوسته خود را با سبک نوازندگی آنها هماهنگ می‌ساخت.
تیم پژوهشی در سال ۲۰۲۳ فناوری هوش مصنوعی‌ای را به نمایش گذاشته بود که زمان‌بندی همراهی پیانو را در اجرای سو می، خواننده سوپرانو، تنظیم می‌کرد. این بار، تیم یک گام فراتر رفت و امکان تولید سولوی بداهه و همراهی موسیقایی توسط هوش مصنوعی را روی صحنه جاز فراهم کرد.
نام گفت: «این اجراها نشان دادند که هوش مصنوعی می‌تواند به نوازندگان انسانی گوش دهد و با واکنش به جریان اجرای آنها، در کنارشان موسیقی خلق کند؛ این پیشرفتی قابل‌توجه نسبت به صرفاً اجرای موسیقی از پیش تعریف‌شده است. ما به پژوهش خود ادامه خواهیم داد تا هوش مصنوعی را به شریکی موسیقایی تبدیل کنیم که بتواند با نوازندگان انسانی در الهام خلاقانه سهیم شود و تبادل داشته باشد، نه اینکه صرفاً به‌عنوان یک ابزار عمل کند.»