معرفی Eleven Music، ابزار جدید ElevenLabs برای تولید موسیقی با هوش مصنوعی

برای مثال، یک نمونه موسیقی با این دستور ساخته شده:

یک قطعه ارکسترال غنی، کاملا سینمایی، با سازهای زهی، بادی برنجی و بادی چوبی، برای یک فانتزی حماسی، پیروزمندانه، شاد، با اوج‌گیری کرشندو، فینال.

نمونه‌هایی از موسیقی‌های ساخته شده

• Echoes of Midnight: با دستور «راک مستقل روان‌گردان و رویایی، با وکال آغشته به ریورب، کیبوردهای قدیمی، هم‌سرایی جذاب، آنالوگ، گیتارهای فیزر شده، حس مبهم و نوستالژیک.»
• Saddles and Shadows: با دستور «یک قطعه حماسی برای یک نمایش کابویی، غرب وحشی، طراحی صدای سینمایی، صدای گیتار با عناصر ارکسترال عالی که به یک فینال قدرتمند میرسه، موسیقی متن.»
• Don’t Let Me Go: با دستور «یک قطعه خیلی قدیمی از دهه ۱۹۵۰ با صدای یک خواننده مرد مسن، جذاب، وینتیج، کلاسیک، نوستالژیک، آهنگ‌های طلایی قدیمی، صدای خش وینیل، هوک‌های وکال جذاب.»
• Obsidian: با دستور «بسیار تاریک، پرتنش و قدرتمند، طراحی صدای سینمایی، هیبرید الکترونیک، موسیقی تریلر، شیطانی، با صدای بوق‌های بلند، ضربه‌ها، بوم، تنش فزاینده، کاملا بی‌کلام.»
• Wanderer of the Moor: با دستور «یک دختر جوان انگلیسی که یک آهنگ محلی قدیمی انگلیسی میخواند، خیره‌کننده، تنها، متفکر و تقریبا وهم‌آور، با سازهای ویولن و محلی انگلیسی، ریورب، آهنگ کوتاه.»
• Yellow Bus Jam: با دستور «آهنگ جم بند درباره رانندگی در شهر نیویورک با یک اتوبوس مدرسه بزرگ زرد با ۲ سولوی گیتار طولانی و هارمونی زیاد.»

تکنولوژی و جنبه‌های فنی

این ابزار موسیقی که Eleven Music نام داره، توسط تیم تحقیقاتی خود شرکت ElevenLabs توسعه داده شده. اونها میگن که این مدل هوش مصنوعی میتونه به خوبی از متن ترانه، گام موسیقی و سرعت (BPM) حتی در دستورهای پیچیده پیروی کنه. این سیستم قابلیت ترکیب یکپارچه سبک‌ها و سازها رو داره و موسیقی رو به صورت لحظه‌ای تولید میکنه.

همچنین یک API عمومی هم برای توسعه‌دهنده‌ها در نظر گرفته شده تا بتونن این قابلیت تولید موسیقی رو مستقیما به اپلیکیشن‌ها، محصولات یا فرآیندهای کاری خودشون اضافه کنن. با این API میشه به صورت برنامه‌نویسی و با دستورات متنی، موسیقی تولید کرد و کنترل کاملی روی سبک، ساختار، ترانه و مدت زمان اون داشت.

نمونه کد برای استفاده از API:

import { ElevenLabsClient, play } from "@elevenlabs/elevenlabs-js";
const elevenlabs = new ElevenLabsClient({
    apiKey: process.env.ELEVENLABS_API_KEY,
});
const music = await elevenlabs.music.compose({
    prompt: "Epic orchestral theme with soaring strings and powerful brass",
    musicLengthMs: 30000,
});
await play(music);

مسئله کپی رایت و همکاری با صنعت موسیقی

یکی از چالش‌های اصلی در زمینه تولید موسیقی با هوش مصنوعی، موضوع کپی رایته. سال گذشته، شرکت‌های Suno و Udio توسط «انجمن صنعت ضبط موسیقی آمریکا» (RIAA) به دلیل استفاده از آثار دارای کپی رایت برای آموزش مدل‌های هوش مصنوعیشون مورد شکایت قرار گرفتن.

اما ElevenLabs اعلام کرده که برای توسعه مدلش با شرکت‌های Merlin Network و Kobalt Music Group قرارداد بسته. این دو شرکت، پلتفرم‌های انتشار دیجیتال برای موسیقی‌دانان مستقل هستن. این قراردادها به ElevenLabs اجازه میده از آثار هنرمندان و ترانه‌سراهایی که این دو شرکت نمایندگی میکنن، برای توسعه مدل بعدی خودشون به اسم Eleven Music Pro استفاده کنه.

• Merlin Network: نماینده هنرمندان بزرگی مثل Adele، Nirvana، Mitski، Carly Rae Jepsen و Phoebe Bridgers است.
• Kobalt Music Group: نماینده هنرمندانی مثل Beck، Bon Iver و Childish Gambino است.

یک نماینده از Kobalt به تک‌کرانچ گفته که هنرمندان باید به صورت داوطلبانه رضایت بدن تا از موسیقیشون برای آموزش هوش مصنوعی استفاده بشه. این نماینده اضافه کرده: «این توافق برای مشتریان ما چندین مزیت کلیدی داره: یک جریان درآمدی جدید در بازاری رو به رشد ایجاد میکنه، شامل تقسیم درآمد میشه تا اونها هم در سود شریک باشن، محافظت‌های قوی در برابر نقض و سو استفاده فراهم میکنه و شرایط مطلوبی رو ارائه میده که با سایر دارندگان حقوق نشر و ضبط قابل مقایسه است.»

ماتی استانیشفسکی، مدیرعامل ElevenLabs، گفته که هدفشون اینه که با لیبل‌های بزرگ موسیقی هم همکاری کنن و تاکید کرده که «این مدل فقط بر اساس داده‌هایی ساخته شده که به اونها دسترسی داریم.»

محدودیت‌های استفاده

با اینکه موسیقی تولید شده برای استفاده تجاری گسترده تایید شده، اما محدودیت‌هایی هم وجود داره. طبق شرایط استفاده ElevenLabs، از این ابزار نمیشه در صنایع سیاسی، مذهبی یا برخی صنایع تحت نظارت خاص استفاده کرد. ساختن آهنگ برای کتابخانه‌های موسیقی تجاری هم مجاز نیست. کاربرها از وارد کردن اسم هنرمندان واقعی یا متن ترانه‌های معروف منع شدن و محتوای تولیدی نباید حقوق شخص ثالث رو نقض کنه یا باعث آسیب بشه.

درباره شرکت ElevenLabs

ElevenLabs در سال ۲۰۲۲ تاسیس شده و به عنوان یک شرکت پیشرو در زمینه تحقیقات و فناوری صوتی هوش مصنوعی شناخته میشه. این شرکت بیشتر به خاطر فناوری تولید صدای خودش معروفه. قبل از این، ابزارهای این شرکت برای ساخت صداهای جعلی از افراد مشهور مثل جو بایدن در تماس‌های رباتیک هم استفاده شده بود. طبق گفته شرکت، کارمندانی از بیش از ۷۲ درصد شرکت‌های حاضر در لیست Fortune 500 از ابزارهای ElevenLabs استفاده میکنن.

لیست کوکی‌های مورد استفاده در وب‌سایت

وب‌سایت ElevenLabs برای کارکردهای مختلف از کوکی‌ها استفاده میکنه. این کوکی‌ها به دسته‌های ضروری، ترجیحات، آماری، بازاریابی و طبقه‌بندی‌نشده تقسیم میشن. در ادامه لیست این کوکی‌ها آورده شده.

کوکی‌های ضروری

نام	ارائه‌دهنده	هدف	حداکثر زمان ذخیره‌سازی	نوع
ar_debug	eleven-public-cdn.elevenlabs.io	بررسی وجود کوکی فنی دیباگر	۱ ماه	HTTP Cookie
__cflb	api.hcaptcha.com	ثبت سرور-کلاستر در حال خدمت‌رسانی به بازدیدکننده	۱ روز	HTTP Cookie
hmt_id	api.hcaptcha.com	تمایز بین انسان و ربات	۳۰ روز	HTTP Cookie

کوکی‌های ترجیحات

نام	ارائه‌دهنده	هدف	حداکثر زمان ذخیره‌سازی	نوع
crisp-client/session/#	www.textomap.com	ضروری برای عملکرد چت‌باکس	پایدار	HTML Local Storage
NEXT_LOCALE	elevenlabs.io	تعیین زبان ترجیحی بازدیدکننده	۱ سال	HTTP Cookie

کوکی‌های آماری

نام	ارائه‌دهنده	هدف	حداکثر زمان ذخیره‌سازی	نوع
ajs_anonymous_id	Loom demo.arcade.software	شمارش بازدید وب‌سایت توسط بازدیدکنندگان مختلف	پایدار	HTML Local Storage
_ga		ثبت یک شناسه منحصر به فرد برای تولید داده‌های آماری	۲ سال	HTTP Cookie

کوکی‌های بازاریابی

نام	ارائه‌دهنده	هدف	حداکثر زمان ذخیره‌سازی	نوع
tt_appInfo	eleven-public-cdn.elevenlabs.io	استفاده توسط تیک‌تاک برای ردیابی خدمات تعبیه‌شده	Session	HTML Local Storage
_fbp	Meta Platforms, Inc.	استفاده توسط فیسبوک برای ارائه محصولات تبلیغاتی	۳ ماه	HTTP Cookie

کوکی‌های طبقه‌بندی‌نشده

نام	ارائه‌دهنده	هدف	حداکثر زمان ذخیره‌سازی	نوع
awc.last.screen.event	Loom	در حال بررسی	Session	HTML Local Storage
bootstrap_data	elevenlabs.io	در حال بررسی	Session	HTTP Cookie