Полное описание
> Иванова, Галина Сергеевна. Анализ методов предобработки текстовых данных = Analysis of text data preprocessing methods / Иванова Г. С., Мартынюк П. А. - Текст : непосредственный // Искусственный интеллект. Теория и практика : научно-практический междисциплинарный журнал. - 2023. - N 4. - С. 20-31. - Библиогр. в конце ст. - ISSN 2949-3250.
| ГРНТИ | УДК | |
| 16.31.21 | 81'322.2 | |
| 28.23.37 | 004.032.26-049.8 |
Рубрики:
Компьютерная лингвистика
Нейронные сети -- Применение
Кл.слова (ненормированные): естественный язык -- предобработка данных -- natural language processing -- NLP -- векторизация -- one-hot -- BOW -- TF-IDF -- LSA -- SVD -- нейросетевая модель -- Word2Vec -- Fasttext -- Glove -- Bert
Аннотация: В настоящей статье проводится анализ этапов предобработки текстовых данных, используемых на них методов и технологий предобработки текстовых данных, а также разрабатываются рекомендации по применению конкретных методов предобработки для рассматриваемых методов векторизации текста.
Доп. точки доступа:
Мартынюк, Полина Антоновна
>
Нет сведений об экземплярах
Держатели документа:
Государственная публичная научно-техническая библиотека России : 123298, г. Москва, ул. 3-я Хорошевская, д. 17 (Шифр в БД-источнике (KATBW): -363171-237800)>
Шифр в сводном ЭК: 0a8f5739cd94267d2bf9133ce2883b59
Иванова, Галина Сергеевна. Методы обработки данных и оценки программ : учебное пособие / Г. С. Иванова, Т. Н. Ничушкина, Е. К. Пугачев, 2020. - 70, [3] с. - Текст (визуальный) : непосредственный.Иванова, Галина Сергеевна. Основы конструирования компиляторов : учебное пособие / Г. С. Иванова, Т. Н. Ничушкина, 2022. - 81 с. - Текст (визуальный) : непосредственный.Иванова, Галина Сергеевна. Лабораторный практикум по программированию на языке ассемблера в операционной системе Linux : учебно-методическое пособие / Г. С. Иванова, Т. Н. Ничушкина, 2022. - 56 с. - Текст (визуальный) : непосредственный.Иванова, Галина Сергеевна. Анализ использования алгоритмов машинного обучения в системах фрод-мониторинга / Г. С. Иванова, Ю. О. Фокина. - Текст : непосредственный // Технологии инженерных и информационных систем : научно-технический журнал / Межрегиональная общественная организация "Московское научно-техническое общество радиотехники, электроники и связи имени А. С. Попова" (МНТОРЭС им. А. C. Попова). - Москва : МНТОРЭС им. А. C. Попова, 2022. - N 2. - с. 121-132Иванова, Галина Сергеевна. Проектирование гибридной рекомендательной системы на базе алгоритмов сжатия данных / Г. С. Иванова, Е. М. Добрянская. - Текст : непосредственный // Технологии инженерных и информационных систем : научно-технический журнал / Межрегиональная общественная организация "Московское научно-техническое общество радиотехники, электроники и связи имени А. С. Попова" (МНТОРЭС им. А. C. Попова). - Москва : МНТОРЭС им. А. C. Попова, 2022. - N 2. - с. 98-105Иванова, Галина Сергеевна. Анализ методов компьютерного зрения для систематизации живописных полотен / Г. С. Иванова, Я. С. Петрова. - Текст : непосредственный // Нейрокомпьютеры : разраб., применение : международный научно-технический журнал / "Издательство "Радиотехника", закрытое акционерное о-во. - Москва : Радиотехника, 2022. - Том 24 N 6. - с. 20-29Иванова, Галина Сергеевна. Анализ нейросетевых языковых моделей при решении задач обработки текстовых данных / Г. С. Иванова, П. А. Мартынюк. - Текст : непосредственный // Нейрокомпьютеры: разработка, применение : международный научно-технический журнал / "Издательство "Радиотехника", закрытое акционерное о-во. - Москва : Радиотехника, 2023. - Том 25 N 2. - с. 5-20Иванова, Галина Сергеевна. Оптимизирующие преобразования алгоритмов решения задач на графах / Г. С. Иванова, В. А. Овчинников, 2025. - 231 с. - Текст (визуальный) : непосредственный.Иванова, Галина Сергеевна. Анализ методов предобработки текстовых данных / Иванова Г. С., Мартынюк П. А. - Текст : непосредственный // Искусственный интеллект. Теория и практика : научно-практический междисциплинарный журнал / Российская академия наук, Академия военных наук, Российская инженерная академия, Военно-инженерная корпорация. - Королёв : Передовые специальные технологии и материалы, 2023. - N 4.- С.20-31
Искусственный интеллект. Теория и практика : научно-практический междисциплинарный журнал / Российская академия наук, Академия военных наук (Москва), Российская инженерная академия (Москва). - Журнал выходит с 2023г. - Текст : непосредственный.Иванова, Галина Сергеевна. Анализ методов предобработки текстовых данных / Иванова Г. С., Мартынюк П. А. - Текст : непосредственный // Искусственный интеллект. Теория и практика : научно-практический междисциплинарный журнал / Российская академия наук, Академия военных наук, Российская инженерная академия, Военно-инженерная корпорация. - Королёв : Передовые специальные технологии и материалы, 2023. - N 4.- С.20-31
Artificial neural networks : сборник научных трудов / Ed. N. Morgan, 1990. - VIII,130 p. p. - Текст : непосредственный.Vemuri V.R. Artificial neural networks:concepts and control applications / V. R. Vemuri, 1992. - 509 p. - Текст : непосредственный.Artificial neural networks:concepts and theory / Сост.Compl.: P. Mehra, B. W. Wah, 1992. - XI,667 p. p. - Текст : непосредственный.Asperti A. Categories,types and structures : монография / A. Asperti, G. Longo, 1991. - 306 p. - Текст : непосредственный.Зулкарнеев М.Ю. Разработка математических моделей и алгоритмов поиска ключевых слов в аудио-сообщениях : специальность 05.13.18 "Математическое моделирование,численные методы и комплексы программ" : диссертация на соискание ученой степени канд. физ.-мат. наук / М. Ю. Зулкарнеев, 2006. - 23 с. - Текст : непосредственный.Чубинидзе К.А. Метод синтактико-семантических шаблонов и его применение в информационной технологии интерпретации текстов : специальность 05.25.05 "Информационные системы и процессы" : диссертация на соискание ученой степени канд. техн. наук / К. А. Чубинидзе, 2006. - 26 с. - Текст : непосредственный.Tomboulian S. Introduction to a system for implementing neural net connections on SIMD architectures : монография / S. Tomboulian, S.a. - 13 p. - Текст : непосредственный.Автоматическое распознавание и синтез речевых сигналов : сборник научных трудов / Институт кибернетики им. В. М. Глушкова (Киев), 1989. - 168 с. - Текст : непосредственный.Саломатина Н.В. Методы и программные средства выделения и численного оценивания вариативности языковых единиц : специальность 05.13.11 "Математическое и программное обеспечение вычислительных машин,комплексов и компьютерных сетей" : диссертация на соискание ученой степени канд. физ.-мат. наук / Н. В. Саломатина, 2009. - 24 с. - Текст : непосредственный.Network : Computation Neural Systems. - Журнал выходит с 1990г. - Текст : непосредственный. Осовский С. Нейронные сети для обработки информации / С. Осовский, 2004. - 343 с. - Текст : непосредственный.Artificial neural networks - ICANN 2008 / SpringerLink (Online service), 2008 r=on-line.Semantics in data and knowledge bases / SpringerLink (Online service), 2008 r=on-line. - Текст : электронный.Sanskrit computational linguistics / SpringerLink (Online service), 2009 r=on-line. - Текст : электронный.Computational processing of the portuguese language / SpringerLink (Online service), 2008 r=on-line. - Текст : электронный.Text, speech and dialogue / SpringerLink (Online service), 2008 r=on-line. - Текст : электронный.Sanskrit computational linguistics / SpringerLink (Online service), 2009 r=on-line. - Текст : электронный.New developments in parsing technology / SpringerLink (Online service), 2005 r=on-line. - Текст : электронный.Information processing with evolutionary algorithms / SpringerLink (Online service), 2005 r=on-line. - Текст : электронный.Dreyfus G. Neural networks / G. Dreyfus, 2005 r=on-line. - Текст : электронный.
Показать все результатыAsperti A. Categories,types and structures : монография / A. Asperti, G. Longo, 1991. - 306 p. - Текст : непосредственный.New developments in parsing technology / SpringerLink (Online service), 2005 r=on-line. - Текст : электронный.Journal on data semantics VI / SpringerLink (Online service), 2006 r=on-lineJournal on data semantics VII / SpringerLink (Online service), 2006 r=on-line. - Текст : электронный.Белоногов Г.Г. Компьютерная лингвистика и перспективные информационные технологии : монография / Г. Г. Белоногов, Ю. П. Калинин, А. А. Хорошилов, 2004. - 246 с. - Текст : непосредственный.Recent developments and applications of natural language processing / Ed. J. Peckham, 1989. - XIV,272 p. p. - Текст : непосредственный.Онтологии и тезаурусы: модели, инструменты, приложения : учебное пособие / Б. В. Добров, В. В. Иванов, Н. В. Лукашевич, В. Д. Соловьев, 2009. - 172 с. - Текст : непосредственный.Cimiano P. Ontology learning and population from text / P. Cimiano, 2006 r=on-line. - Текст : электронный.Computing attitude and affect in text: theory and applications / SpringerLink (Online service), 2006 r=on-line. - Текст : электронный.Nugues P. An introduction to language processing with perl and prolog / P. Nugues, 2006 r=on-line. - Текст : электронный.Hausser R. A computational model of natural language communication / R. Hausser, 2006 r=on-line. - Текст : электронный.Natural language processing and text mining / SpringerLink (Online service), 2007 r=on-line. - Текст : электронный.Grune D. Parsing techniques / D. Grune, C. Jacobs, 2008 r=on-line. - Текст : электронный.Синявский А.Л. Технология разработки лингвистического обеспечения / А. Л. Синявский, О. А. Холоденко, Н. Л. Яловенко ; Ред. А. С. Клещев, 1992. - 143 с. - Текст : непосредственный.Journal on data semantics X / SpringerLink (Online service), 2008 r=on-line. - Текст : электронный.Dekker P. Cases,adverbs,situations and events / P. Dekker, 1996. - 20 p. - Текст : непосредственный.Dekker P. Scopes in discourse / P. Dekker, 1996. - 22 p. - Текст : непосредственный.Benthem J.van Tarskian variations.Dynamic parameters in classical semantics / J.van Benthem, G. Cepparello, 1994. - 27 p. - Текст : непосредственный.Metadata and semantics / SpringerLink (Online service), 2009 r=on-line. - Текст : электронный.Journal on data semantics II / SpringerLink (Online service), 2005 r=on-line
Показать все результатыЗулкарнеев М.Ю. Разработка математических моделей и алгоритмов поиска ключевых слов в аудио-сообщениях : специальность 05.13.18 "Математическое моделирование,численные методы и комплексы программ" : диссертация на соискание ученой степени канд. физ.-мат. наук / М. Ю. Зулкарнеев, 2006. - 23 с. - Текст : непосредственный.Чубинидзе К.А. Метод синтактико-семантических шаблонов и его применение в информационной технологии интерпретации текстов : специальность 05.25.05 "Информационные системы и процессы" : диссертация на соискание ученой степени канд. техн. наук / К. А. Чубинидзе, 2006. - 26 с. - Текст : непосредственный.Саломатина Н.В. Методы и программные средства выделения и численного оценивания вариативности языковых единиц : специальность 05.13.11 "Математическое и программное обеспечение вычислительных машин,комплексов и компьютерных сетей" : диссертация на соискание ученой степени канд. физ.-мат. наук / Н. В. Саломатина, 2009. - 24 с. - Текст : непосредственный.Sanskrit computational linguistics / SpringerLink (Online service), 2009 r=on-line. - Текст : электронный.Computational processing of the portuguese language / SpringerLink (Online service), 2008 r=on-line. - Текст : электронный.Sanskrit computational linguistics / SpringerLink (Online service), 2009 r=on-line. - Текст : электронный.Advances in natural language processing / SpringerLink (Online service), 2006 r=on-lineNatural language processing and information systems / SpringerLink (Online service), 2007 r=on-line. - Текст : электронный.Natural language processing - IJCNLP 2005 / SpringerLink (Online service), 2005 r=on-line. - Текст : электронный.Computational processing of the portuguese language / SpringerLink (Online service), 2006 r=on-line. - Текст : электронный.Natural language processing and information systems / SpringerLink (Online service), 2006 r=on-line. - Текст : электронный.Guide to ocr for indic scripts / SpringerLink (Online service), 2009 r=on-line. - Текст : электронный.State of the art in computational morphology / SpringerLink (Online service), 2009 r=on-line. - Текст : электронный.Aspects of natural language processing / SpringerLink (Online service), 2009 r=on-line. - Текст : электронный.Бледнов А.М. Разработка и исследование моделей и информационной технологии семантико-синтаксического анализа русскоязычного текста : специальность 05.13.18 "Математическое моделирование,численные методы и комплексы программ", 05.13.01 "Системный анализ,управление и обработка информации (по отраслям)" : диссертация на соискание ученой степени канд. техн. наук / А. М. Бледнов, 2007. - 20 с. - Текст : непосредственный.Сидоров Ю.В. Математическая и информационная поддержка методов обработки литературных текстов на основе формально-грамматических параметров : специальность 05.13.18 "Математическое моделирование,численные методы и комплексы программ" : автореферат диссертации на соискание ученой степени канд. техн. наук / Ю. В. Сидоров, 2002. - 19 с. - Текст : непосредственный.Silva C. Inductive inference for large scale text classification / C. Silva, B. Ribeiro, 2010 r=on-line. - Текст : электронный.Юй Чжонхуа.Модели, методы и алгоритмы автоматического анализа текстов на китайском языке : специальность 05.13.16 "" : автореферат диссертации на соискание ученой степени канд.техн.наук / Юй Чжонхуа, 1994. - 18 с. - Текст : непосредственный.Онтологии и тезаурусы: модели, инструменты, приложения : учебное пособие / Б. В. Добров, В. В. Иванов, Н. В. Лукашевич, В. Д. Соловьев, 2009. - 172 с. - Текст : непосредственный.Nugues P. An introduction to language processing with perl and prolog / P. Nugues, 2006 r=on-line. - Текст : электронный.
Показать все результатыИскусственный интеллект. Теория и практика. - Журнал, 2023г. № 4. - Текст : непосредственный.Иванова, Галина Сергеевна. Анализ методов предобработки текстовых данных / Иванова Г. С., Мартынюк П. А. - Текст : непосредственный // Искусственный интеллект. Теория и практика : научно-практический междисциплинарный журнал / Российская академия наук, Академия военных наук, Российская инженерная академия, Военно-инженерная корпорация. - Королёв : Передовые специальные технологии и материалы, 2023. - N 4.- С.20-31
Искусственный интеллект. Теория и практика. - Журнал, 2023г. № 4. - Текст : непосредственный.Данилова, Анна Александровна. Лимиты естественного и искусственного интеллекта в процессе принятия решений и речевой деятельности / Данилова А. А. - Текст : непосредственный // Искусственный интеллект. Теория и практика : научно-практический междисциплинарный журнал / Российская академия наук, Академия военных наук, Российская инженерная академия, Военно-инженерная корпорация. - Королёв : Передовые специальные технологии и материалы, 2023. - N 4.- С.2-7Щерица, Артем Сергеевич. Философские проблемы разработки искусственного интеллекта / Щерица А. С., Цюндык В. В. - Текст : непосредственный // Искусственный интеллект. Теория и практика : научно-практический междисциплинарный журнал / Российская академия наук, Академия военных наук, Российская инженерная академия, Военно-инженерная корпорация. - Королёв : Передовые специальные технологии и материалы, 2023. - N 4.- С.8-10Силантьев, Альберт Юрьевич. Искусственный интеллект и социальные структуры / Силантьев А. Ю. - Текст : непосредственный // Искусственный интеллект. Теория и практика : научно-практический междисциплинарный журнал / Российская академия наук, Академия военных наук, Российская инженерная академия, Военно-инженерная корпорация. - Королёв : Передовые специальные технологии и материалы, 2023. - N 4.- С.11-16Лёвин, Андрей Иванович. Анализ зарубежного опыта по использованию технологий искусственного интеллекта в правоохранительной деятельности / Лёвин А. И. - Текст : непосредственный // Искусственный интеллект. Теория и практика : научно-практический междисциплинарный журнал / Российская академия наук, Академия военных наук, Российская инженерная академия, Военно-инженерная корпорация. - Королёв : Передовые специальные технологии и материалы, 2023. - N 4.- С.17-19Иванова, Галина Сергеевна. Анализ методов предобработки текстовых данных / Иванова Г. С., Мартынюк П. А. - Текст : непосредственный // Искусственный интеллект. Теория и практика : научно-практический междисциплинарный журнал / Российская академия наук, Академия военных наук, Российская инженерная академия, Военно-инженерная корпорация. - Королёв : Передовые специальные технологии и материалы, 2023. - N 4.- С.20-31Сидак, Дарья Алексеевна. Подход к представлению и выявлению инцидентов информационной безопасности с использованием методов глубокого машинного обучения и анализа иерархий / Сидак Д. А., Сидак А. А., Василенко В. В. - Текст : непосредственный // Искусственный интеллект. Теория и практика : научно-практический междисциплинарный журнал / Российская академия наук, Академия военных наук, Российская инженерная академия, Военно-инженерная корпорация. - Королёв : Передовые специальные технологии и материалы, 2023. - N 4.- С.32-37Мещеряков, Роман Валерьевич. Вопросы безопасности систем искусственного интеллекта / Мещеряков Р. В. - Текст : непосредственный // Искусственный интеллект. Теория и практика : научно-практический междисциплинарный журнал / Российская академия наук, Академия военных наук, Российская инженерная академия, Военно-инженерная корпорация. - Королёв : Передовые специальные технологии и материалы, 2023. - N 4.- С.38-41Климов, Сергей Михайлович. Методика анализа угроз компьютерных атак и уязвимостей объектов критической информационной инфраструктуры с элементами искусственного интеллекта / Климов С. М, Климов А. С. - Текст : непосредственный // Искусственный интеллект. Теория и практика : научно-практический междисциплинарный журнал / Российская академия наук, Академия военных наук, Российская инженерная академия, Военно-инженерная корпорация. - Королёв : Передовые специальные технологии и материалы, 2023. - N 4.- С.42-50Петренко С.С. Узкий искусственный интеллект в управлении сложными системами / Петренко C. С. - Текст : непосредственный // Искусственный интеллект. Теория и практика : научно-практический междисциплинарный журнал / Российская академия наук, Академия военных наук, Российская инженерная академия, Военно-инженерная корпорация. - Королёв : Передовые специальные технологии и материалы, 2023. - N 4.- С.51-57Прохватилов В.В. Можно ли управлять киберголемом? К вопросу о возможности управления "галлюцинациями" генеративного ИИ / Прохватилов В. В. - Текст : непосредственный // Искусственный интеллект. Теория и практика : научно-практический междисциплинарный журнал / Российская академия наук, Академия военных наук, Российская инженерная академия, Военно-инженерная корпорация. - Королёв : Передовые специальные технологии и материалы, 2023. - N 4.- С.58-62
Заказ фрагмента документа ₽