Інтелектуальна система аналізу мовлення і тексту для людей з вадами слуху
Автор: Коштура Діана Андріянівна
Кваліфікаційний рівень: магістр (ОНП)
Спеціальність: Системний аналіз (освітньо-наукова програма)
Інститут: Інститут комп'ютерних наук та інформаційних технологій
Форма навчання: денна
Навчальний рік: 2022-2023 н.р.
Мова захисту: англійська
Анотація: Люди з вадами слуху стикаються зі значними труднощами у повсякденному житті, особливо щодо спілкування. Ця проблема може ускладнити швидкий і ефективний доступ до важливої інформації, впливаючи на їхні повсякденні справи, соціальні взаємодії та загальну якість життя. Тому існує потреба в розробці ефективного рішення для покращення спілкування для людей з вадами слуху. У цьому проєкті я прагну розробити програму, яка може перетворювати мовлення в текст і аналізувати його, щоб надавати швидкі відповіді людям з вадами слуху за допомогою Python, Ubuntu, Kivy, Android, машинного навчання, NLP, Airtable, системного аналізу, UML, Kanban , і Agile методології [2]. Постановка проблеми. Поточні рішення, доступні для людей з вадами слуху, обмежені та часто потребують допомоги сурдоперекладача. Ця проблема може спричинити затримки, непорозуміння та розчарування для обох сторін. Крім того, ці рішення доступні лише іноді, особливо коли потрібна негайна допомога. Тому існує потреба в розробці рішення, яке зможе швидко і точно перетворювати мову в текст і надавати відповіді людям з вадами слуху в реальному часі [3]. Методологія. Буде розроблено програму з використанням Python, мови програмування високого рівня, відомої своєю простотою та легкістю використання, яка може перетворювати мовлення в текст. Цей процес залучатиме алгоритми машинного навчання для аналізу шаблонів мовлення та перетворення їх у текст. Також будуть використовуватись техніки НЛП для підвищення точності процесу перетворення мови в текст. Крім того, буде використовуватись Kivy, бібліотека Python з відкритим вихідним кодом для розробки мультисенсорних додатків, щоб створити зручний інтерфейс для людей з вадами слуху для взаємодії з програмою [1]. Також в цій роботі буде використовуватись Airtable, хмарна система керування базами даних, щоб зберігати й аналізувати дані, щоб забезпечити точність і ефективність програми. Також буде використовуватись UML, графічна система позначень для специфікації, візуалізації та документування систем програмного забезпечення, щоб розробити архітектуру системи. Буде використовуватись Agile-методології, такі як дошки Kanban, щоб керувати процесом розробки проєкту та забезпечити своєчасну реалізацію . Очікуваний результат. Основним результатом програми буде надання швидких і точних відповідей людям з вадами слуху, покращення їх загального спілкування та якості життя. Крім того, зручний інтерфейс програми дозволить людям з вадами слуху легко взаємодіяти з програмою та швидко й ефективно отримувати необхідну інформацію. Нарешті, архітектура програми, розроблена з використанням UML, забезпечить повне розуміння структури програми, полегшуючи її підтримку та оновлення в майбутньому [4]. Будучи студенткою, яка розробляє таку програму, я отримую знання та досвід у різних областях інформатики та розробки програмного забезпечення. Для розробки такої програми важливо розуміти життєвий цикл розробки програмного забезпечення та важливість системного аналізу та проєктування для розробки комплексної та надійної програми. Об’єктом дослідження в області програм для людей з вадами слуху є процес перетворення мовлення в текст та аналізу тексту для швидких відповідей. Предметом дослідження в цій галузі є методи і засоби перетворення мовлення в текст та методи і засоби аналізу мовлення для швидких відповідей. Практичне значення. Практичні результати досліджень у цій галузі можуть включати розробку нових і більш ефективних комунікаційних технологій, удосконалення та вдосконалення існуючих технологій, а також визначення передового досвіду використання комунікаційних технологій для людей із вадами слуху. Ці результати можуть мати прямий вплив на життя людей з вадами слуху, дозволяючи їм ефективніше спілкуватися, легше отримувати доступ до інформації та повніше брати участь у соціальних, освітніх і професійних умовах. Висновок. Підсумовуючи, цей магістерський проєкт має на меті розробити програму, яка може перетворювати мовлення в текст і аналізувати його, щоб надавати швидкі відповіді людям з вадами слуху за допомогою Python, Ubuntu, Kivy, Android, машинного навчання, NLP, Airtable, системного аналізу, UML, Kanban , і Agile методології. Основним результатом програми стане покращення комунікації для людей з вадами слуху, що позитивно вплине на їхні повсякденні справи, соціальні взаємодії та загальну якість життя. Ключові слова: Python, машинне навчання, NLP, Kivy, вади слуху, швидкі відповіді, Airtable, UML, Kanban, Agile. Перелік використаних літературних джерел: 1. Т.М. Басюк, В.В. .Литвин, Л.М. Захарія, Н.Е. Кунанець Машинне навчання: Навчальний посібник призначений для студентів, що навчаються за першим (бакалаврським) рівнем вищої освіти за спеціальностями галузі знань 12 „Інформаційні технології”. Львів: Видавництво «Новий Світ - 2000», 2019. - 335 с. 2. D. Koshtura and N. Kunanets, "Information Sysem Project for Communication of Hearing Impaired Users," 2022 IEEE 17th International Conference on Computer Sciences and Information Technologies (CSIT), Lviv, Ukraine, 2022, pp. 247-251, doi: 10.1109/CSIT56902.2022.10000866. 3. V. Andrunyk, T. Shestakevych and D. Koshtura, "The text analysis software for hearing-impaired persons," 2021 IEEE 16th International Conference on Computer Sciences and Information Technologies (CSIT), LVIV, Ukraine, 2021, pp. 119-123, doi: 10.1109/CSIT52700.2021.9648605. 4. D. Koshtura, V. Andrunyk, T. Shestakevych, Development of a Speech-to-Text Program for People with Haring Impairments, CEUR Workshop Proceedings 2917 (2021) 565–583.