AudioCraft
Một codebase thống nhất để tạo nhạc và hiệu ứng âm thanh bằng AI.

Tổng quan AudioCraft là một nền tảng toàn diện được thiết kế cho các ứng dụng âm thanh tạo sinh (generative audio), bao gồm âm nhạc, hiệu ứng âm thanh và nén âm thanh. Nó đơn giản hóa sự phức tạp của các mô hình âm thanh tạo sinh thông qua thiết kế tinh gọn.
Các tính năng chính:
- Mô hình tích hợp: Kết hợp MusicGen và AudioGen, sử dụng một mô hình ngôn ngữ autoregressive duy nhất để tạo âm thanh hiệu quả.
- Đầu ra chất lượng cao: Tận dụng EnCodec để tạo ra âm thanh chất lượng cao bằng cách học từ các discrete tokens được trích xuất từ tín hiệu âm thanh thô.
- Tạo âm thanh từ văn bản (Text-to-Audio): Có khả năng tạo ra âm thanh từ đầu vào là văn bản, giúp nó trở nên linh hoạt cho nhiều ứng dụng khác nhau.
Với khả năng đan xen token (token interleaving) và điều kiện hóa (conditioning) tinh tế, AudioCraft sẵn sàng nâng cao trải nghiệm âm thanh sáng tạo cho cả các nhà phát triển và nghệ sĩ.