Платформа AI для создания музыки и мультимедиа, запущенная лабораторией Tencent Music Tianqin
Введение в инструменты
TME StudioЭто вспомогательная платформа для создания музыки и мультимедийного искусства, запущенная лабораторией Tencent Music Tianqin, с основными услугами QQ Music, All People K Song, Tencent Music Man и другими продуктами серии TME, предоставляя пользователям инструменты полного процесса «создания музыки-анализа-производства аудиовидео».Основываясь на огромной библиотеке музыки TME и технологии ИИ, она охватывает основные функции, такие как разделение музыки, вспомогательное написание текстов, интеллектуальная музыкальная композиция, а также включает в себя такие специальные инструменты, как Галактический аудиоэффект (оптимизация качества звука нескольких сцен), MusE (создание аудиовидео одним кнопкой), а также исследование технологии виртуального человека мета-вселенной.Инструменты сочетают профессиональное создание музыки с потребностями контента UGC, быстро повышают производительность музыки и позволяют обычным пользователям производить контент с качеством, сопоставимым с PGC.
Основные функции
Разделение музыки: на основе глубокого обучения, загружайте любую песню, чтобы отделять голос от барабанов, баса, гитары, пианино и других музыкальных инструментов, что удобнее для вторичного создания;
Вычисления MIR: ИИ извлекает информацию о частоте выборки музыки, BPM, ритме, тональности, аккордах, барабанах, аллах и т. д., глубоко анализирует музыкальное содержание, помогает созданию и микшированию;
Вспомогательное написание текстов: анализ текстов, прозы и поэтических материалов всей библиотеки TME, интеллектуальное рекомендование рифмированных слов, решение проблемы истощения вдохновения для написания текстов;
Интеллектуальная музыкальная графика: алгоритм нейронной сети создает гитарную графика для массового количества песен, загружая музыку, можно получить играемую графика;
Galaxy Sound: предлагает 47 базовых звуковых эффектов (охватывающих бас, объемные, голосовые и т. д.), адаптируемых к наушникам, амплитурам, автомобильным сценам, поддерживает индивидуальную настройку AI + DSP (совмещая биометрику пользователя и окружающую среду прослушивания);
MusE создание аудио-видео: ввод песни / слова для создания обложки альбома, плакатов с текстами песен, динамических видео с текстами песен; указанные фильмы и телевизионные работы можно интеллектуально редактировать короткое видео (включая специальные эффекты, фильтры, клипы персонажей);
Возможности для запуска: пространственный аудиомикс (панорамный микс), синтез стилей (Remix с одной кнопкой), миксель (регулировка музыкальных деталей);
Технология виртуального человека: разработка виртуального человека «Маленьких братьев и сестер», который будет поддерживать виртуальные образы, виртуальные танцы, генерирование песни, музыкальное световое шоу и другие функции.
Сцена работы
Создание коротких видео / автомедиа: с помощью MusE генерируйте постеры с текстами, короткие видео с карточками, используйте функцию разделения музыки для извлечения фрагментов песен в саундтреки, улучшите текстуру содержания;
Помощь в создании музыки: любители музыки используют вспомогательное написание слов для поиска рифмы, интеллектуальная музыкальная композиция для получения гитарной композиции, вычисление MIR для анализа структуры песен, быстрое создание оригинальной демо;
Музыкальный анализ и оптимизация: аудиопрофессионалы используют вычисления MIR для извлечения ключевой информации о музыке и настройки качества звука различных сцен с помощью эффектов Галактики (например, оптимизация автомобильной музыки);
Адаптация продукции Tencent: пользователи QQ Music используют функции качества звука для прослушивания песен, а пользователи K-Songs используют интеллектуальную функцию редактирования звука и синтеза песен для улучшения опыта использования.
Применимое население
Создатель коротких видеороликов / автомедиа: быстро генерируют видео-лирики, плакаты, извлекают фрагменты песен для саундтрека, снижают порог для производства аудиовидео;
Любители музыки / независимые музыканты: создание музыки и повторная адаптация с помощью вспомогательного слова, интеллектуальных композиций и функций разделения музыки, недорогостоящие;
Пользователи продуктов Tencent: адаптируются к QQ Music, всенародным песням K, ленивым слушателям и другим платформам, чтобы улучшить опыт прослушивания песен, пения и производства аудио;
Разработчики аудио / видео: настраивайте индивидуальные музыкальные инструменты или приложения с помощью межплатформенного SDK доступа к Galaxy Sound и вычислениям MIR.
Уникальные преимущества
ТМЕ музыкальная библиотека и технология: опираясь на огромную аутентичную музыкальную библиотеку Tencent, вычисления MIR, оптимизация звуковых эффектов и другие функции более соответствуют основным музыкальным стилям, поддержка данных более точна;
Глубокая связь между продуктами: функции напрямую адаптируются к таким продуктам серии TME, как QQ Music, всенародные песни K, творческий контент может быть беспрепятственно синхронизирован с соответствующей платформой, образуя закрытый цикл «создания-распределения»;
Удобный для создания UGC: инструмент MusE реализует «ввод и генерация», не требуя специальных навыков для создания высококачественных аудиовидео, эффективность гораздо больше, чем аналогичные инструменты;
Звуковые эффекты для нескольких сцен: звуковые эффекты Galaxy адаптированы для наушников, внешних проигрывателей, автомобильных и других сцен, в сочетании с технологией AI + DSP для индивидуальной настройки, что обеспечивает лучший опыт звука.