Препринт Idea2Prior, поданный на arXiv 14 октября 2026 года, описывает систему поиска научных публикаций по неформальной исследовательской идее. В историческом сравнении авторов на 30 запросах она показала более высокий общий Hit@5, чем ChatGPT web Deep Research и Gemini web Deep Research, но на запросах категории HARD лидировал ChatGPT. Результаты позволяют сравнить системы в рамках этой оценки, но не устанавливают победителя для любых поисковых задач.
Как Idea2Prior ищет публикации
Система предназначена для случаев, когда идею исследования трудно найти по совпадению слов: важный механизм работы может описываться другими терминами или не упоминаться в аннотации. По описанию авторов, Idea2Prior объединяет поиск в нескольких источниках, проверку идентичности публикаций, оценку аннотаций по отдельным аспектам и расширение поиска через семантически связанные цитирования. Затем компонент совместного ранжирования Expert упорядочивает найденные работы.
В режиме поиска система ранжирует до пяти статей из короткого списка не более чем из 60 публикаций. Для этого используются доступные полные аннотации и локально выбранные свидетельства из PDF; при получении PDF предусмотрено пять фиксированных попыток. Это режим поиска и ранжирования литературы, а не универсальный веб-исследовательский отчёт.
Общий результат выше, но на сложных запросах лидировал ChatGPT
В историческом сравнении авторов было 30 запросов — по десять категорий EASY, MEDIUM и HARD. По принятому авторами способу подсчёта Hit@5 — доля запросов, для которых целевая статья оказалась среди первых пяти результатов, — составил 53,3% у Idea2Prior, 43,3% у ChatGPT web Deep Research и 36,7% у Gemini web Deep Research. Знаменатель для каждого показателя — все 30 запросов. Результаты и описание Idea2Prior в препринте на arXiv.
Авторы сообщают, что преимущество Idea2Prior сосредоточено на EASY и MEDIUM, тогда как на HARD лидировал ChatGPT. Поэтому общий Hit@5 не означает, что Idea2Prior лучше для любой исследовательской идеи. Попарное пересечение списков Top 5 в авторских результатах находилось в диапазоне от 6% до 34%: системы нередко возвращали разные наборы работ.
Время и стоимость рассчитаны на разных выборках
Выбранные авторами прогоны Idea2Prior в среднем занимали 8 минут 53 секунды. Для ChatGPT web Deep Research и Gemini web Deep Research в препринте приведены пользовательские средние — соответственно 5,2 и 4,7 минуты. Это не единый редакционный замер: для Idea2Prior указано время выбранных прогонов, для веб-сервисов — пользовательские оценки.
Отдельная выборка из девяти API-запросов к Idea2Prior дала среднюю стоимость 0,0945 доллара на задачу. Авторы оговаривают, что это историческое наблюдение, а не сопоставление с ценой подписок ChatGPT и Gemini, поэтому по этой сумме нельзя заключить, какой вариант дешевле.
Что именно показывают результаты
Показатели поиска, времени и стоимости приведены авторами препринта Shitian Yang, Ruijie Tao и Jian Huang; независимого теста редакция не проводила. Доступная аннотация описывает целевой поиск публикаций по идее и оставляет за рамками общие веб-исследования, поиск по форумам и более широкую оценку релевантности. Результаты стоит понимать в этих границах, а не как проверку всех сценариев исследовательского поиска.
