Исходное сообщение
"Facebook открыл код библиотеки классификации текста fastText" Отправлено Аноним, 23-Авг-16 11:33
клоун: я привёл упрощённый пример. Берётся набор текстов заранее известной тематики и по ним определяются ключевые слова. Определяются веса слова, калибруется функция расстояния. Затем берётся набор текстов другой тематики и проводится повторная калибровка. Получили список ключевых слов и веса для них. Теперь можно юзать. В основе всех подобных алгоритмов лежит полином, с которым игрались ещё в 60-е. Где-то полином в явном виде, где-то как параметры функции расстояния, где-то (в нейросетях) как вес узлов, но полином это один хрен полином. Ничего нового не придумали, поэтому ускоряют то, что есть. Что-то интересное есть только у Интел с её интеллектуальным процессором (лабораторную крысу разрезали, записали как соединены нейроны мозга, заменили их на транзисторы и вроде как получили принципиально новое распознавание образов), но он пока в бете.