 Результаты веб-поиска сгруппированы с использованием алгоритма Lingo Carrot 2 . | |
| Разработчики) | Поиск моркови |
|---|---|
| Стабильный выпуск | 4.1.0 / 4 января 2021 г. |
| Репозиторий | github |
| Написано в | Ява |
| Операционная система | Кроссплатформенность |
| Тип | Анализ текста и кластерный анализ |
| Лицензия | Лицензия BSD |
| Интернет сайт | поиск |
Carrot² [1] - это механизм кластеризации результатов поиска с открытым исходным кодом. [2] Он может автоматически группировать небольшие коллекции документов, например, результаты поиска или аннотации документов, в тематические категории. Carrot² написан на Java и распространяется под лицензией BSD .
История [ править ]
Первоначальная версия Carrot² была реализована в 2001 году Давидом Вайсом в рамках его магистерской диссертации для проверки применимости алгоритма кластеризации STC для кластеризации результатов поиска на польском языке. [3] В 2003 году был добавлен ряд других алгоритмов кластеризации результатов поиска, включая Lingo [4], новый алгоритм кластеризации текста, разработанный специально для кластеризации результатов поиска. Хотя исходный код Carrot² был доступен с 2002 года, версия 1.0 была официально выпущена только в 2006 году. В том же году была выпущена версия 2.0 с улучшенным пользовательским интерфейсом и расширенным набором инструментов. В 2009 году версия 3.0 внесла значительные улучшения в качество кластеризации, упростил API и новое приложение с графическим интерфейсом для настройки кластеризации на основе Eclipse.Платформа многофункциональных клиентов . В 2020 году версия 4.0.0 принесла упрощение API, очистку кода и удаление Desktop Workbench. Версия 4.1.0 возвращает Workbench в виде веб-приложения.
| Релиз | Дата выхода | Основные изменения и новые функции |
|---|---|---|
| 4.1.0 | Январь 2021 г. | Веб-инструментальные средства. Словари JSON и новые возможности фильтрации. Полировка API. |
| 4.0.0 | Июль 2020 | Изменения и упрощения API во всей кодовой базе. Удаление устаревших технологий и инструментов. Новая документация и чистка кода. |
| 3.16.2 | Сентябрь 2019 | Обновите сторонние библиотеки (проблемы, связанные с безопасностью). |
| 3.16.1 | Январь 2019 | Обновление визуализаций JS. Миграция Microsoft Bing API v5 на v7. |
| 3.16.0 | Май 2018 | Капитальный ремонт проблем совместимости с Java 9+. Совместимость Workbench с дистрибутивами Ubuntu. Обновление источников документов и удаление нефункциональных источников документов. |
| 3.15.1 | Март 2017 г. | Исправление ошибки для выпуска .NET, которое могло привести к неконтролируемым исключениям ввода-вывода в недоступном текущем рабочем каталоге. |
| 3.15.0 | Октябрь 2016 | Переход с Bing API V2 на V5. Обновление сторонних зависимостей. Внутренняя косметика. |
| 3.14.0 | Сентябрь 2016 | Улучшения Workbench (поддержка высокого разрешения, улучшения MacOSX, исправления ошибок). PubMed переходит на HTTP. Прочие мелкие улучшения. |
| 3.13.0 | Июль 2016 г. | Исправлены ошибки Servlet API, исправлены ошибки Workbench, удален источник документа Google, исправлены языковые коды для нескольких языков. |
| 3.12.0 | Февраль 2016 г. | Обновление польского словаря Morfologik, инфраструктурные изменения и корректировки, позволяющие C2 работать в соответствии с более строгими политиками диспетчера безопасности. |
| 3.11.0 | Октябрь 2015 г. | Обновление Apache Lucene, исправления ошибок и накопление изменений с 3.10.x minors. |
| 3.10.4 | Октябрь 2015 г. | Обновление библиотеки Морфологик. |
| 3.10.3 | Август 2015 г. | Перепаковал Google Guava, чтобы избежать конфликтов в Solr. |
| 3.10.2 | Июль 2015 г. | Незначительные исправления в Workbench (арабский кластерный дисплей). |
| 3.10.1 | Май 2015 г. | Визуализация Aduna исчезла из дистрибутива MacOS. Мелкие исправления в Workbench. |
| 3.10.0 | Май 2015 г. | Обновления визуализации. Исправление ошибок. Обновления зависимостей библиотеки. |
| 3.9.4 | Ноябрь 2014 г. | Обновление FoamTree. Новые атрибуты многоязычной кластеризации. Исправления визуализации. |
| 3.9.3 | Июль 2014 г. | Обновление FoamTree. Исправления и настройки инфраструктуры (jflex, URL-адреса репозитория sonatype). |
| 3.9.2 | Апрель 2014 г. | Исправлена ошибка FoamTree HTML5. |
| 3.9.1 | Апрель 2014 г. | Исправления ошибок, обновления визуализаций HTML5. |
| 3.9.0 | Февраль 2014 | HTML5 визуализации, заменяющие flash, обновление зависимостей библиотек, исправления. |
| 3.8.1 | Октябрь 2013 | Исправления ошибок, незначительные изменения в функциональности. |
| 3.8.0 | Июль 2013 | Исправления ошибок, обновления зависимостей библиотек. |
| 3.7.1 | Май 2013 | Мелкие исправления ошибок (отладочная версия 3.7.0). |
| 3.7.0 | апрель 2013 | Изменения инфраструктуры ядра (строковые идентификаторы), лучшая интеграция с Solr XSLT, настройки Workbench для больших входных данных, обновленные зависимости. |
| 3.6.3 | апрель 2013 | Мелкие исправления ошибок и улучшения: настройка XSLT адаптера Solr, настройки Workbench для больших входных данных, обновленные зависимости. |
| 3.6.2 | Ноябрь 2012 г. | Мелкие исправления и улучшения. |
| 3.6.1 | Август 2012 г. | Устранение небольших багов. |
| 3.6.0 | Июнь 2012 г. | Инфраструктурные изменения, рефакторинг и исправления ошибок. |
| 3.5.3 | Декабрь 2011 г. | Обновления инфраструктуры в результате миграции на GitHub. Обновление Workbench до SWT 3.7.1. |
| 3.5.2 | Сентябрь 2011 г. | Поддержка Ajax в Document Clustering Server, улучшенный источник документов Bing, улучшения Workbench, исправления ошибок. |
| 3.5.1 | Июнь 2011 г. | Исправлены ошибки, улучшена интеграция визуализации, удалена поддержка Yahoo BOSS API. |
| 3.5.0 | Май 2011 г. | Визуализация FoamTree, кластеризация пополам k-средних, улучшения управления ресурсами |
| 3.4.3 | Март 2011 г. | Распространение в центральный репозиторий Maven |
| 3.4.2 | Октябрь 2010 г. | Исправление ошибок |
| 3.4.1 | Сентябрь 2010 г. | Пакет совместимости с Solr 1.4.x, исправления ошибок |
| 3.4.0 | Август 2010 г. | .NET API для вызова кластеризации Carrot² |
| 3.3.0 | Апрель 2010 г. | Значительные улучшения масштабируемости в алгоритме кластеризации STC |
| 3.2.0 | Март 2010 г. | Экспериментальная поддержка кластеризации арабского и корейского контента, приложение командной строки для кластеризации в пакетном режиме, лицензионные зависимости LGPL удалены |
| 3.1.0 | Сентябрь 2009 г. | Экспериментальная поддержка кластеризации китайского контента, плагин кластеризации результатов поиска для Apache Solr |
| 3.1.0 | Сентябрь 2009 г. | Экспериментальная поддержка кластеризации китайского контента, плагин кластеризации результатов поиска для Apache Solr |
| 3.0.1 | Март 2009 г. | Инструментальные средства кластеризации документов доступны для Mac OS X |
| 3.0.0 | Январь 2009 г. | Инструмент Document Clustering Workbench добавлен для легкого экспериментирования с кластеризацией Carrot², радикально упрощен Java API, повторно реализовано веб-приложение для кластеризации результатов поиска, доступно руководство пользователя [5] |
| 2.1.0 | Август 2007 г. | Сервер кластеризации документов добавлен для представления кластеризации как службы REST |
| 2.0.0 | Сентябрь 2006 г. | Новый пользовательский интерфейс веб-приложения кластеризации результатов поиска |
| 1.0.0 | Январь 2006 г. | Первый официальный выпуск, бинарные файлы доступны на SourceForge |
| 0,0.0 | с 2002 г. | Релизы инкубации, исходный код доступен на SourceForge |
Архитектура [ править ]
Carrot² 4.0 - это преимущественно библиотека программирования Java с общедоступными API-интерфейсами для управления языковыми ресурсами, настройки и выполнения алгоритмов. Компонент HTTP / REST (сервер кластеризации документов) предоставляется для взаимодействия с другими языками.
Алгоритмы кластеризации [ править ]
Carrot² предлагает несколько алгоритмов кластеризации документов, которые делают упор на качество меток кластера:
- Lingo: [4] алгоритм кластеризации, основанный на разложении по сингулярным значениям.
- STC: [6] Кластеризация суффиксного дерева
Спин-офф [ править ]
Морковный поиск [ править ]
Carrot Search [7], коммерческое подразделение проекта Carrot², работает над дальнейшим развитием Carrot², предлагает алгоритм кластеризации текста в реальном времени [8], совместимый с платформой Carrot², а также консультационные услуги по интеллектуальному анализу текста на основе открытого исходного кода. и проприетарное программное обеспечение.
Лаборатории поиска моркови [ править ]
Carrot² дала начало ряду независимых проектов с открытым кодом, выпущенных под эгидой Carrot Search Labs. [9] Следующие проекты опубликованы или были опубликованы в рамках этой инициативы:
- Рандомизированное тестирование: средство запуска тестов JUnit со встроенными утилитами, позволяющими сделать каждый запуск теста немного другим (рандомизированным). Также задача ANT для запуска тестов JUnit на параллельных JVM с балансировкой нагрузки и другими прибамбасами.
- Коллекции высокопроизводительных примитивов для Java (HPPC): списки, наборы, карты и другие коллекции примитивов для Java, настроенные для обеспечения максимальной производительности и эффективности использования памяти.
- SmartSprites: полностью автоматическое обслуживание спрайтов CSS; Никакого утомительного копирования и вставки в CSS при добавлении или изменении спрайтовых изображений.
Прекращенные проекты:
- jSuffixArrays: несколько реализаций Java структуры данных Suffix Array с различными характеристиками производительности и памяти.
- JUnitBenchmarks: набор расширений для превращения тестов JUnit4 в микротестеры производительности с мониторингом GC, измерением дисперсии времени и простой графической визуализацией.
См. Также [ править ]
- Портал бесплатного программного обеспечения
Ссылки [ править ]
- ^ Проект Carrot2, Станислав Осинский, Давид Вайс. "Carrot2 - механизм кластеризации результатов поиска с открытым исходным кодом" .CS1 maint: несколько имен: список авторов ( ссылка )
- ^ Демонстрация кластеризации результатов поиска Carrot 2
- ^ Давид Вайс: Интерфейс кластеризации для результатов веб-поиска на польском и английском языках. Магистерская диссертация. Познанский технологический университет, Познань, Польша, 2001 скачать PDF
- ^ a b Станислав Осински, Давид Вайс: концептуальный алгоритм для кластеризации результатов поиска . IEEE Intelligent Systems, май / июнь, 3 (том 20), 2005 г., стр. 48–54.
- ^ "Морковь2" .
- ^ Орен Замир, Орен Эциони : Кластеризация веб-документов: демонстрация осуществимости , Труды 21-й ежегодной международной конференции ACM SIGIR по исследованиям и разработкам в области поиска информации (1998), стр. 46–54
- ^ Carrot Search sc "Carrot Search: программное обеспечение для кластеризации и визуализации документов" .
- ^ Поиск моркови sc "Поиск моркови: Lingo3G: Механизм кластеризации текстовых документов" .
- ^ Поиск моркови sc "Лаборатории поиска моркови" .
