กำลังดิ้นรนกับเครื่องมือ AI ที่ซับซ้อนเช่น OpenAI Jukebox? บทความนี้เผยให้เห็นว่าทำไม AI Music Generator ของ Filmora จึงเป็นโซลูชันที่สมบูรณ์แบบสำหรับผู้สร้างวิดีโอ เรียนรู้วิธีสร้างเพลงปลอดค่าลิขสิทธิ์ได้ทันทีและเปลี่ยนโปรเจกต์ของคุณด้วยเครื่องมือสร้างเพลง AI ที่ใช้งานง่ายที่สุดเครื่องมือหนึ่งในปัจจุบัน
ส่วนที่ 1. Jukebox AI คืออะไร?
Jukebox AI คือโมเดลโครงข่ายประสาทเทียมของ OpenAI ที่ขยายขอบเขตของสิ่งที่ AI สามารถทำได้กับดนตรี โดยทำงานโดยการวิเคราะห์รูปแบบในข้อมูลเสียงดิบและเนื้อเพลงเพื่อสร้างรูปคลื่นเสียงแบบเต็มโดยตรง OpenAI เริ่มโปรเจกต์นี้เพื่อขยายขีดความสามารถของโมเดลการสร้างเนื้อหาให้มากขึ้น ก่อนหน้า Jukebox การทดลองก่อนหน้านี้ของพวกเขาคือ MuseNet ซึ่งเน้นไปที่การสร้างดนตรีโดยใช้ชุดข้อมูล MIDI ขนาดใหญ่ อย่างไรก็ตาม MIDI จับเพียงข้อมูลโน้ตและจังหวะพื้นฐานเท่านั้น
กับ Jukebox ความท้าทายนั้นยิ่งใหญ่กว่ามาก เนื่องจากต้องการการควบคุมที่แม่นยำในทุกอย่างตั้งแต่จังหวะและโทนเสียงไปจนถึงโครงสร้างเพลงในระยะยาว เสียงดิบไม่มีที่สำหรับข้อผิดพลาดในเรื่องจังหวะหรือการเปลี่ยนผ่าน ดังนั้น Jukebox จึงต้องเรียนรู้ไม่เพียงแค่รูปแบบระยะสั้นเท่านั้น แต่ยังต้องรู้วิธีรักษาความสอดคล้องตลอดทั้งแทร็กด้วย
เทคโนโลยีหลักของ Jukebox AI
เปิดตัวในปี 2020 OpenAI ฝึกฝน Jukebox บนชุดข้อมูลเพลงขนาดใหญ่ (มากกว่า 1.2 ล้านเพลง) พร้อมเนื้อเพลงและข้อมูลเมตาเพื่อช่วยให้เข้าใจรูปแบบข้ามแนวเพลงและทศวรรษ
ก่อนอื่นจะบีบอัดเสียงดิบโดยใช้เทคนิคที่เรียกว่า VQ-VAE (Vector Quantized Variational Autoencoder) ซึ่งแยกเพลงออกเป็นชิ้นเล็กๆ ที่จัดการได้ง่ายขึ้น จากนั้นโมเดลทรานส์ฟอร์เมอร์ (คล้ายกับที่อยู่เบื้องหลัง ChatGPT) จะสร้างโค้ดเหล่านี้ตามลำดับเพื่อสร้างเพลงเต็มรูปแบบ
เนื่องจากการตั้งค่านี้ Jukebox จึงไม่ได้แค่โยนโน้ตแบบสุ่ม มันเข้าใจจังหวะ ความกลมกลืน และโทนเสียงร้องได้ดีพอที่จะผลิตเพลงที่จริงๆ แล้วลื่นไหล แม้ว่าจะไม่สมบูรณ์แบบก็ตาม
OpenAI's Jukebox AI ฟรีหรือไม่?
Jukebox เป็นโปรเจกต์วิจัยโดย OpenAI และปัจจุบันไม่ได้เสนอเป็นผลิตภัณฑ์เชิงพาณิชย์ อย่างไรก็ตาม OpenAI ได้เปิดให้ใช้โค้ด น้ำหนักโมเดล และผลลัพธ์ตัวอย่างฟรีสำหรับการวิจัยและการทดลอง
ส่วนที่ 2. สิ่งที่คุณสามารถทำได้ด้วย Jukebox AI
ด้วยความสามารถพิเศษของ AI Jukebox ในการสร้างเสียงดิบ มีอะไรให้ทำได้มากมายนอกเหนือจากการสร้างเพลงธรรมดาๆ
ส่วนที่ 3. ข้อจำกัดและทิศทางอนาคตของ Jukebox AI
แม้ว่า Jukebox AI จะน่าประทับใจเพียงใด มันยังคงเป็นโปรเจกต์วิจัยมาก ไม่ใช่เครื่องมือสร้างเพลงแบบ plug-and-play ที่คุณสามารถเริ่มใช้ได้ทันที มันมีข้อจำกัดที่ค่อนข้างใหญ่ที่ทำให้มันใช้งานได้จริงน้อยลงในตอนนี้
ข้อจำกัดของ Jukebox AI
- ไม่มีโครงสร้างเพลงที่ชัดเจน: Jukebox สามารถสร้างเพลงที่เสียงดี แต่โครงสร้างค่อนข้างยุ่งเหยิง คุณจะไม่ได้ท่อนที่สะอาด คอรัสที่ติดหู หรือบริดจ์ที่เหมาะสม ส่วนใหญ่จะไหลไปในทิศทางเดียวโดยไม่มีการทำซ้ำหรือฮุค
- สิ่งรบกวนและเสียงรบกวนในเสียง: เนื่องจากเสียงถูกบีบอัดแล้วขยายขึ้น ผลลัพธ์สุดท้ายมักรวมเสียงที่ไม่ต้องการ เช่น การบิดเบือนหรือเสียงพร่า ที่ทำให้รู้สึกค่อนข้างหยาบ
- เวลาในการสร้างช้ามาก: การสร้างเพลงเพียงหนึ่งนาทีอาจใช้เวลาประมาณ 9 ชั่วโมงโดยใช้ฮาร์ดแวร์ระดับไฮเอนด์ นั่นเป็นการรอนานมาก โดยเฉพาะถ้าคุณต้องการแทร็กที่ยาวขึ้น
- ต้องการฮาร์ดแวร์ที่ทรงพลัง: การรัน Jukebox ด้วยตัวเองต้องการ GPU ระดับไฮเอนด์หลายตัวและการตั้งค่าทางเทคนิคที่ลึกซึ้ง มันไม่ใช่สิ่งที่ผู้ใช้ทั่วไปส่วนใหญ่สามารถรันได้
- ความหลากหลายของดนตรีจำกัด: ข้อมูลการฝึกฝนส่วนใหญ่เป็นภาษาอังกฤษและเอนเอียงไปทางสไตล์ดนตรีตะวันตกอย่างหนัก นั่นหมายถึงความแม่นยำน้อยลงสำหรับภาษาอื่นหรือเสียงที่หลากหลายทางวัฒนธรรม
- ไม่มีส่วนติดต่อผู้ใช้: ทุกอย่างทำงานผ่านโค้ดและบรรทัดคำสั่ง คุณอาจสับสนในกระบวนการสร้างเพลงด้วย Jukebox AI
ทิศทางอนาคตของ Jukebox AI
แม้จะมีข้อจำกัดเหล่านี้ OpenAI มองเห็นศักยภาพมากมายในอนาคตของการสร้างเพลงด้วย AI Jukebox อาจเป็นเพียงจุดเริ่มต้น และเวอร์ชันในอนาคตอาจเปิดโอกาสมากขึ้น
- การสร้างที่เร็วขึ้นมาก: การลดเวลารอที่ยาวนานเป็นจุดสนใจใหญ่ ด้วยโมเดลที่ปรับให้เหมาะสมและฮาร์ดแวร์ที่ดีกว่า การสร้างเพลงเต็มรูปแบบอาจกลายเป็นเรื่องที่รวดเร็วพอสำหรับการใช้งานแบบเรียลไทม์
- คุณภาพเสียงที่ดีขึ้น: คาดหวังเสียงที่สะอาดและประณีตขึ้นด้วยสิ่งรบกวนจากการบีบอัดที่น้อยลง ทำให้ใกล้เคียงกับเสียงสตูดิโอระดับมืออาชีพมากขึ้น
- ความหลากหลายมากขึ้นในข้อมูลการฝึกฝน: การขยายไปไกลกว่าภาษาอังกฤษและดนตรีตะวันตกเป็นหลักอาจทำให้ Jukebox จัดการกับภาษา เครื่องดนตรี และแนวเพลงระดับโลกได้มากขึ้น
- การเข้าถึงที่ง่ายขึ้นสำหรับทุกคน: แทนที่จะต้องใช้โค้ดและ GPU เครื่องมือที่ได้รับแรงบันดาลใจจาก Jukebox ในที่สุดอาจมาในรูปแบบของแอปที่ใช้งานง่ายหรือแพลตฟอร์มบนเบราว์เซอร์
ส่วนที่ 4. วิธีใช้ Jukebox AI เพื่อสร้างเพลง
ดังที่เราได้กล่าวไว้ก่อนหน้านี้ ไม่มีอินเทอร์เฟซแบบภาพใน Jukebox ทุกอย่างทำงานผ่านโค้ด ดังนั้นกระบวนการใช้ Jukebox AI เพื่อสร้างเพลงจึงอาจรู้สึกค่อนข้างเป็นเทคนิค
วิธีที่เข้าถึงได้ง่ายที่สุดในการใช้มันคือผ่าน Google Colab Jupyter notebook ที่แบ่งปันโดย OpenAI เนื่องจากมันนำคุณไปสู่สภาพแวดล้อมบนคลาวด์ที่การประมวลผลหนักทั้งหมดเกิดขึ้นจากระยะไกล เราจะแนะนำคุณผ่านแต่ละขั้นตอนเพื่อให้กระบวนการติดตามได้ง่ายขึ้น
วิธีใช้ Jukebox AI
!git clone https://github.com/openai/jukebox.git
%cd /content/jukebox/!pip install -r requirements.txt นี่จะเพิ่มไลบรารีเช่น librosa, tqdm, soundfile และอื่นๆ
python jukebox/download.py --model=5b_lyrics💡 เคล็ดลับ: หากคุณเจอปัญหาหน่วยความจำ ให้ใช้โมเดล
1b_lyrics ที่เล็กกว่าแทน เมื่อเสร็จแล้ว คุณพร้อมที่จะสร้างเพลงที่ขับเคลื่อนด้วย AI ด้วย Jukebox!
วิธีบันทึกเพลงที่สร้างของคุณ
from google.colab import drivedrive.mount('/content/drive')จากนั้นอนุญาตโน้ตบุ๊กให้เข้าถึง Google Drive ของคุณ
- ตั้งความยาวตัวอย่างสำหรับแทร็กของคุณ
- เลือกแนวเพลงและสไตล์ศิลปินสำหรับ Jukebox ที่จะเลียนแบบ
- เลือกโมเดล:
5b_lyricsสำหรับผลลัพธ์ที่มีรายละเอียด หรือ1b_lyricsสำหรับผลลัพธ์ที่เร็วขึ้น - ปรับอุณหภูมิการสุ่มตัวอย่าง: ค่าที่ต่ำกว่าจะทำตามพรอมต์ของคุณอย่างใกล้ชิด ค่าที่สูงกว่าจะสร้างผลลัพธ์ที่คาดเดาได้ยากขึ้น
หลังจากการสร้างเสร็จสมบูรณ์ คุณสามารถดูตัวอย่างและดาวน์โหลดเพลงของคุณได้โดยตรงจาก Google Drive
ส่วนที่ 5. ทางเลือกอื่นของ AI Music Generator ที่ดีที่สุดให้ลองใช้วันนี้
ในขณะที่เครื่องมืออย่าง CapCut และ Adobe Premiere ได้รับความนิยมในการตัดต่อวิดีโอ แต่มักต้องใช้กระบวนการแยกต่างหากที่ซับซ้อนสำหรับการสร้างเพลง Filmora ในทางกลับกัน ได้รวม AI Music Generator เข้าไว้ในตัวแก้ไขโดยตรง ซึ่งหมายความว่าคุณสามารถสร้างเพลงประกอบที่สมบูรณ์แบบได้โดยไม่ต้องออกจากแพลตฟอร์ม ทำให้เป็นประสบการณ์ที่เร็วขึ้นและใช้งานง่ายกว่าเมื่อเทียบกับโปรแกรมแก้ไขอื่นๆ
Jukebox อาจเป็นก้าวสำคัญในการสร้างเพลงด้วย AI แต่มันไม่ใช่สำหรับทุกคน หากการทำงานกับโค้ด เวลาในการสร้างที่นาน และการตั้งค่าทางเทคนิคไม่เหมาะกับคุณ คุณสามารถเริ่มต้นด้วยทางเลือกอื่นของ Jukebox ที่เข้าถึงได้ง่ายกว่า เช่น AI Music Generator in Wondershare Filmora.
Filmora ทำให้การสร้างเพลงของคุณง่ายขึ้นอย่างไร
การสร้างเพลงด้วย AI ไม่จำเป็นต้องซับซ้อนเสมอไป ด้วย Filmora คุณสามารถข้ามการเขียนโค้ดและการตั้งค่าที่สับสน และเริ่มสร้างเพลงที่คุณต้องการได้ทันที
แต่ไม่เหมือน Jukebox, Filmora Music Generator สร้างเพลงตามอารมณ์ ประเภท หรือธีมที่คุณเลือก กระบวนการใช้เพียงไม่กี่คลิกและไม่กี่นาที คุณยังสามารถเลือกระยะเวลาและจำนวนแทร็กเพื่อสำรวจตัวเลือกเพิ่มเติม นี่คือเหตุผลที่เราจัดให้เป็นหนึ่งในทางเลือกที่ดีที่สุดของ OpenAI Jukebox
ดาวน์โหลดอย่างปลอดภัยฟีเจอร์นี้ถูกสร้างเข้าไว้ในโปรแกรมตัดต่อวิดีโอ ดังนั้นคุณสามารถสร้างเพลง แก้ไข และจับคู่กับวิดีโอได้ในที่เดียว อย่างไรก็ตาม โปรดทราบว่า AI Music Generator ของ Filmora ปัจจุบันสร้างเฉพาะแทร็กดนตรีบรรเลงเท่านั้น โดยไม่มีเสียงร้องหรือเนื้อเพลง
วิธีสร้างเพลงด้วย Filmora
นอกเหนือจากเพลงแล้ว Filmora ยังเป็นศูนย์กลางโปรแกรมตัดต่อวิดีโอ AI ที่สมบูรณ์ หลังจากสร้างเพลงประกอบที่สมบูรณ์แบบแล้ว ให้สำรวจเครื่องมืออันทรงพลังอื่นๆ เช่น AI Image Generator เพื่อสร้างภาพที่สวยงามตระการตา หรือ AI Subtitle Generator เพื่อเพิ่มคำบรรยายที่แม่นยำทันที เครื่องมือเหล่านี้ทำงานร่วมกันเพื่อทำให้ขั้นตอนการสร้างวิดีโอทั้งหมดของคุณเร็วขึ้นและฉลาดขึ้น
สรุป
Jukebox ของ OpenAI ให้ภาพรวมที่น่าตื่นเต้นเกี่ยวกับอนาคตของการสร้างเพลงด้วย AI มันแสดงให้เห็นว่า AI สามารถไปได้ไกลแค่ไหนในการเลียนแบบสไตล์ เนื้อเพลง และเสียง แค่เตรียมพร้อมสำหรับกระบวนการทางเทคนิคและเวลารอที่ยาวนาน
สำหรับใครก็ตามที่กำลังมองหาวิธีที่เร็วขึ้นและใช้งานง่ายกว่าในการสร้างเพลง AI Music Generator ในตัวของ Filmora เป็นทางเลือกที่ยอดเยี่ยมของ Jukebox AI มันรวดเร็ว ใช้งานง่าย และเหมาะสำหรับผู้สร้างวิดีโอที่ต้องการแทร็กดนตรีบรรเลงปลอดค่าลิขสิทธิ์ทันที
คำถามที่พบบ่อย
-
Jukebox AI สามารถสร้างเพลงโดยไม่มีเนื้อเพลงหรือเสียงร้องได้หรือไม่?
ได้ Jukebox AI สามารถสร้างแทร็กดนตรีบรรเลงเท่านั้นได้ โดยการใช้โมเดลที่ไม่มีเนื้อเพลงหรือเลือกที่จะไม่ป้อนเนื้อเพลง คุณสามารถนำมันไปโฟกัสที่การจัดเรียงดนตรีโดยไม่มีเสียงร้องได้ -
ฉันสามารถปรับแต่ง Jukebox AI ด้วยเพลงหรือเสียงของฉันเองได้หรือไม่?
ไม่ง่ายนัก Jukebox ไม่ได้ออกแบบมาสำหรับการปรับแต่งในระดับผู้ใช้ การฝึกอบรมแบบกำหนดเองจะต้องใช้พลังการคำนวณมหาศาล ความเข้าใจอย่างลึกซึ้งเกี่ยวกับการเรียนรู้ของเครื่อง และการเข้าถึงชุดข้อมูลขนาดใหญ่ของคุณเอง -
Jukebox AI สร้างไฟล์ในรูปแบบใด?
Jukebox มักจะส่งออกเสียงดิบในรูปแบบ WAV ซึ่งเป็นไฟล์เสียงคุณภาพสูงที่ไม่บีบอัด แต่ตัวอย่างจำนวนมากที่แชร์ออนไลน์เป็น MP3 เพื่อลดขนาดไฟล์ -
การสร้างเพลงในสไตล์ของศิลปินจริงโดยใช้ Jukebox AI ถูกกฎหมายหรือไม่?
แม้ว่าการใช้ Jukebox เพื่อวัตถุประสงค์ส่วนตัวหรือการวิจัยไม่เป็นไร แต่การเผยแพร่หรือสร้างรายได้จากเพลงที่เลียนแบบศิลปินจริงอย่างใกล้เคียงอาจก่อให้เกิดข้อกังวลเกี่ยวกับลิขสิทธิ์หรือความคล้ายคลึง ควรหลีกเลี่ยงการใช้ในเชิงพาณิชย์หากผลลัพธ์มีความคล้ายคลึงกับผลงานของศิลปินมาก