Майбутнє соціальної сфери, змінене «голосом»: порівняння моделей ШІ та вимоги до точності
blog AI Business

Майбутнє соціальної сфери, змінене «голосом»: порівняння моделей ШІ та вимоги до точності

Розпізнавання голосу ШІ змінює догляд. Результати бенчмарків показують високу точність OpenAI Whisper та недоліки Kotoba-Whisper.


Еволюція штучного інтелекту (ШІ) кардинально покращила швидкість і точність перетворення нашого «голосу» на цифрові дані. Зокрема, поява моделей розпізнавання мовлення на чолі з «Whisper» від OpenAI приносить тиху, але впевнену революцію в соціальну та медичну сфери, які історично були обтяжені важкими адміністративними завданнями на кшталт «документи, документи, документи» для кожного кроку.

Стрімка еволюція розпізнавання мовлення ШІ та її вплив на соціальну сферу

У минулому голосове введення могло створювати стійке враження незручного у використанні через низькі показники розпізнавання та клопіт із виправленнями. Проте сучасні найпередовіші моделі ШІ здатні вловлювати слова з точністю, що дорівнює або перевищує людську, навіть в умовах використання масок чи наявності фонового шуму. Цей технологічний прорив привертає увагу як козир для кардинального зниження адміністративного навантаження на персонал у соціальних закладах, які стикаються із серйозним дефіцитом кадрів.

Можливості найновішої Whisper та похідних моделей від лідера галузі ШІ OpenAI: порівняння бенчмарків

Соціальна сфера та догляд вимагають більшого, ніж просто швидкість. Оскільки вони працюють з інформацією, що стосується людських життів, точність, де помилки є неприпустимими, також є критично важливою. Ми суворо перевірили точність транскрибування основних моделей ШІ за допомогою аудіофайлів, що моделюють реальні умови догляду та медичних закладів. Результати виявили вражаючу різницю в можливостях моделей. Зверніть увагу, що використаний аудіозапис був прочитаний вголос Куроусагі, чоловіком віком близько шістдесяти років, тому результати можуть відрізнятися для жінок, які складають більшу частину персоналу соціальної сфери. Сподіваємося, цей матеріал стане для вас корисним довідковим документом.

Назва моделі

Розмір моделі

Швидкість (176 симв.)

Точність символів (Char Acc)

Оцінка та опис

OpenAI Whisper Large-v3

3.0GB

14.04 s

81.2%

【Найвища точність】 Глибоке розуміння контексту, збереження високої точності навіть для технічних термінів.

OpenAI Whisper Large-v3-turbo

1.5GB

6.66 s

80.1%

【Практично】 Зберігає високу точність під час обробки приблизно вдвічі швидше за large-v3.

ReazonSpeech NeMo v2

2.4GB

10.63 s

79.0%

Виводить зв'язний текст, але точність на рівні символів близька до Whisper. Проте через безперервний вивід людям потрібно розставляти розділові знаки.

OpenAI Whisper

medium

1.5GB

7.99 s

67.4%

Точність символів знижується порівняно з Large.

kotoba-whisper-v2.2

1.5GB

5.90 s

Найшвидша

36.9%

Друга половина речення втрачається, зміст сильно спотворений. Далеко до практичного використання.

Qwen3-ASR-1.7B

4.5GB


617.52 s


80.7%

У будь-якому разі дуже повільно. Точність розпізнавання непогана, але при багатьох користувачах це буде критично.

Згідно з результатами бенчмарку, модель Whisper large-v3 від OpenAI продемонструвала найвищий рівень точності. З іншого боку, широко розрекламована «kotoba-whisper-v2.2» мала значно нижчу точність символів (36,9%) з критичною проблемою обриву транскрипції посеред речення. Через брак точності для ШІ, її практичне впровадження у соціальній сфері наразі виглядає малоймовірним. *Зауважте, що тестування проводилося на Macbook Pro M5 з використанням MLX; результати в середовищі NVIDIA CUDA можуть відрізнятися.

Ризики, пов'язані зі «значними помилками конвертації»

Це випробування також виявило проблеми, які неможливо виміряти цифровою точністю (такою як CER), що використовується в бенчмарках. Наприклад, навіть у високоефективних моделях ми бачили випадки, коли «ниркова недостатність» помилково розпізнавалася як «анемія», а «діаліз» перетворювався на «кидання каміння». Це не просто орфографічні помилки, а серйозні збої, які можуть спотворити сам зміст догляду.

Тому при впровадженні новітнього ШІ недостатньо просто обрати модель; необхідне тонке налаштування для правильного розпізнавання специфічних термінів, імен пацієнтів та назв препаратів. Розробка «спеціалізованої для догляду моделі LoRA», навченої на голосах літніх жінок та фоновому шумі лікарень, продиктована наполегливими вимогами персоналу, який розуміє важливість кожного символу.

Час для спілкування з підопічними завдяки підвищенню продуктивності

У разі досягнення високої точності введення тексту голосом за допомогою ШІ ефект буде колосальним. В одному із закладів впровадження системи, що дозволяє записувати голос безпосередньо під час надання догляду, успішно скоротило час на адміністративні завдання більш ніж на 40 годин на місяць на кожного працівника. Ці «40 годин» — не просто цифра. Зекономлений час перенаправляється від споглядання екранів до «справжнього догляду», коли персонал може дивитися в обличчя підопічних та вислуховувати їхні слова.

ШІ жодним чином не є заміною людині. Це найпотужніший інструмент для звільнення працівників від кайданів паперової рутини та повернення теплого спілкування, яке може дати лише людина. У міру покращення точності ШІ соціальні заклади прискорять свій розвиток у напрямку справжнього «людиноцентрованого догляду».


【Sources】

  1. CareNews (новини у сфері догляду): приклади підвищення продуктивності праці
  2. OpenAI: Звіт про дослідження моделі Whisper
  3. Міністерство охорони здоров'я, праці та соціального забезпечення: сприяння підвищенню продуктивності праці у сфері догляду