От агрегации новостей к информационной аналитике

Агрегация новостей решила настоящую проблему. Когда информация жила на тысячах отдельных сайтов, сведение её в одно место было по-настоящему полезно, и продукты, сделавшие это хорошо, стали инфраструктурой.

Проблема, которую они решили, больше не является проблемой.

Что делает агрегатор

Агрегатор собирает документы, грубо убирает дубликаты, ранжирует по сочетанию свежести и популярности и показывает список. Единица его работы — статья. Добавляемая им ценность — местоположение: он знает, где что лежит.

Всё, что он вам отдаёт, по-прежнему в той форме, в какой было опубликовано: документ, написанный в определённый момент, предполагающий контекст, которого у вас может не быть, и не заявляющий никакой связи с остальными документами списка.

Что остаётся несделанным

Получив двадцать статей по теме, читателю всё равно предстоит сделать следующее:

• восстановить действительную последовательность событий, которая не совпадает с порядком публикации;
• заметить, что шесть из двадцати восходят к одному исходному сообщению;
• определить повторяющиеся сущности и связи между ними;
• найти более ранний материал, который статьи считают прочитанным;
• увидеть, где два источника противоречат друг другу;
• решить, что актуально, а что уже заменено.

Это и есть работа. Агрегатор доставляет вас к её стартовой черте.

Что меняет аналитический слой

Аналитический слой работает с другой единицей. Не со статьёй, а с событием, сущностью, утверждением и связью — извлечёнными из статей и сопоставимыми между ними.

Этот сдвиг меняет то, что вы получаете:

Агрегация	Информационная аналитика
Список документов	Структурированная тема
Порядок по публикации	Порядок по времени событий
Дубликаты удалены	Происхождение прослежено
Статьи непрозрачны	События, сущности и утверждения адресуемы
Связи подразумеваются	Связи явные и проверяемые
Настоящее время	Полная история, поддерживаемая в актуальности

Результат — не список получше. Это другой объект: тема, по которой можно перемещаться, с собранной хронологией, прикреплёнными источниками и видимыми связями.

Честные оговорки

Извлечение вносит ошибки, которых агрегатор допустить не может, — просто потому, что не берётся за то, в чём можно так ошибиться. Ссылка между документами либо есть, либо нет; извлечённое событие может быть неточным незаметно.

Средство против этого — не заявления о точности, а прослеживаемость: каждый элемент возводится к тексту, из которого взят, чтобы усомнившийся читатель мог проверить это за один шаг. Структура, скрывающая источники, хуже списка. Структура, показывающая их, строго лучше.

Почему важно название категории

«Новости» подразумевают свежесть, редакционную рамку и предметную область. Информационная аналитика шире и площе: любой информационный поток, разобранный структурно, без претензии на редакционную власть над ним.

Именно на этом различии построен NWS.ONE — не лучшая лента, а слой, меняющий то, что у вас в руках, когда вы садитесь в чём-то разобраться.