Дослідники з Корейського інституту передових технологій спільно з лабораторією Naver AI Lab створили унікальний застосунок AACessTalk, який спрощує спілкування між батьками та дітьми з аутизмом, котрі мало говорять.
Проблема комунікації
Діти з аутизмом, які мають обмежені мовленнєві навички, найчастіше використовують жести та міміку, вимовляючи лише окремі слова. Традиційно для допомоги застосовують картки з малюнками (PECS), але вони здебільшого обмежуються базовими побутовими фразами типу «я хочу їсти» чи «мені холодно». Для більш складного спілкування цього недостатньо, а батькам важко підтримувати діалог, коли не зрозуміло, як саме реагувати.
Як працює AACessTalk
Застосунок встановлюють на планшет, підключаючи до нього спеціальну кнопку для передачі ходу у розмові. Коли дитина натискає кнопку, це означає «тепер моя черга» або «я закінчив».
- Починає розмову батько чи мати — обирає тему.
- GPT-4 аналізує повідомлення й визначає, про що йтиметься далі.
- На екрані з’являються картинки, підібрані за темою, з урахуванням історії діалогів та вподобань дитини.
- Системі батьків пропонують підказки для м’якого розвитку діалогу. Якщо дорослий поводиться занадто суворо або говорить надто складно, ШІ делікатно попереджає про це.
- Алгоритм адаптується до настрою, інтересів та активності дитини, «вчиться» у процесі взаємодії.
Новий рівень діалогу
У двотижневому експерименті, до якого залучили 11 сімей, результати перевершили очікування. Діти стали проявляти ініціативу, самостійно обираючи теми для розмови, а не лише відповідали на запитання.
Батьки теж змінилися — вони більше слухали та менше «допитували».
«Ми вперше по-справжньому спілкувалися», — ділиться одна з мам.
Перспективи
Розробники планують розширити функціонал і протестувати AI для підтримки спілкування у дітей з іншими особливостями розвитку.
