Как работает Aure
При обучении DeepL разделяет голосовую идентичность, мелодику речи и содержание. Так каждый компонент можно независимо перенести на другой язык. Обучение с подкреплением помогает исключить акценты из сгенерированной речи.
Aure автоматически работает в DeepL Voice для онлайн-встреч, личных бесед и через API DeepL. На запуске модель поддерживает английский, немецкий, испанский, французский, итальянский, японский, португальский и корейский языки.
Другие шаги DeepL
DeepL впервые добавила сохранение голоса в сентябре — год в источнике не указан. В мае компания сократила около 250 сотрудников и решила перестроить работу вокруг небольших команд, использующих ИИ. Так DeepL намерена стать компанией, изначально построенной вокруг ИИ.
Кроме того, DeepL приобрела команду Mixhalo — специалиста по потоковой передаче аудио, — чтобы развивать синхронный перевод речи. Похожую задачу решает Block: недавно компания представила Dessa, речевую модель, которая распознаёт эмоции и сарказм непосредственно по аудио.
По оценке Dataist, Aure расширяет синхронный перевод за счёт голосовых особенностей, которые могут влиять на смысл сказанного. При этом на запуске модель охватывает восемь языков, а доступность функции зависит от сервисов DeepL Voice и API DeepL.
Читайте также
Стартап хочет бороться с биологическим оружием на основе ИИ с помощью ИИ
Ставка OpenAI на корпоративные продажи довела квартальную выручку до $10 млрд, но до Anthropic компании всё ещё далеко
Новый ИИ-агент Databricks говорит гендиректору Али Годси всю правду без прикрас
Китайская ловушка для Хуанга сработала: глава Nvidia всё равно в неё попался
Plurai хочет улучшить работу ИИ-агентов тем же подходом, который помог вывести беспилотные автомобили на дороги
TrustedRouter запустил три новые зашифрованные «фьюжн»-модели, объединяющие несколько LLM, одна из них использует только американские модели
Американские брокеры данных продают китайским ИИ-лабораториям среды для обучения с подкреплением на полмиллиарда долларов
Приложения, созданные с помощью Grok, раскрыли данные пациентов, пароли в открытом виде и воронку продаж SpaceXSI
Исследование: дата-центры для ИИ планируют строить собственные электростанции в огромных масштабах, несмотря на климатические риски
13-летняя школьница спросила ИИ о самоубийстве на школьном ноутбуке — тревогу не подняли несколько недель
Кризис в Nvidia заставил экспертов по корпоративному управлению достать попкорн
ИИ сделал оценку студенческих работ «почти невозможной», заявил регулятор высшего образования Англии
OpenAI и Anthropic ждёт новый надзор: в Нью-Йорке вступил в силу закон о безопасности ИИ
BotPsy: личный помощник на устройстве с агентной языковой моделью менее чем на 1 млрд параметров
Oura покупает стартап Counsel Health в сфере первичной помощи на базе ИИ за $625 млн
ИИ-агент Meta Muse появился на Apple Watch и часах с Android Wear OS
У ИИ-диджея Spotify появились новые голоса и характеры, а болтать он может меньше
Лазарь, выйди вон: как перепрограммировать спящие нейроны и внедрить бэкдор в ИИ-агента
Otter AI теперь распознаёт разговоры на более чем 30 языках
Любовь Албанизи к музыке дала трещину из-за ИИ. Сможет ли он сыграть по-новому?
Ежедневные новости об ИИ
Каждый день отбираем важные новости об ИИ и рассказываем главное — без хайпа и воды. Если хотите понимать, что происходит в ИИ раньше остальных, — подписывайтесь.
Только важное — каждый день
В Telegram