Cloudflare покупает Human Native: как это изменит рынок данных для ИИ?

Сегодня мы с радостью сообщаем, что Cloudflare приобрела компанию Human Native, британский рынок данных для ИИ, специализирующийся на преобразовании мультимедийного контента в удобные для поиска и полезные данные.

Команда Human Native последние несколько лет была сосредоточена на помощи разработчикам ИИ в создании лучших моделей с использованием лицензированных данных. Их технология помогает издателям и разработчикам превращать неструктурированный, «сырой» контент во что-то, что можно понять, лицензировать и, в конечном счете, оценить. Они подходят к данным не как к чему-то, что нужно собрать (скрапить), а как к классу активов, заслуживающему структуры, прозрачности и уважения.

Доступ к высококачественным данным может привести к лучшим техническим результатам. Один из клиентов Human Native, известная британская компания в области видео-ИИ, отказалась от своих существующих тренировочных данных после достижения превосходных результатов с данными, полученными через Human Native. В дальнейшем они будут обучать модели только на полностью лицензированном, репутационно проверенном, качественном контенте.

Это дает представление о том, какой может быть экономическая модель Интернета в эпоху генеративного ИИ: лучший ИИ, построенный на лучших данных, с честным контролем, вознаграждением и признанием для создателей.

Последние 30 лет открытый Интернет основывался на фундаментальном обмене ценностями: создатели создают контент, агрегаторы (такие как поисковые системы или социальные сети) направляют трафик. Создатели могут монетизировать этот трафик с помощью рекламы, подписок или прямой поддержки. Это экономический цикл, который питал взрывной рост Интернета.

Но сейчас он испытывает серьезное напряжение.

Соотношение «сканирования к реферальному трафику» стремительно растет: на одного реального посетителя приходятся десятки тысяч сканирований от ИИ и ботов, и непонятно, как многоцелевые краулеры используют доступный им контент.

Сообщество создателей, публикующих контент в Интернете, разнообразно: новостные издатели, контент-мейкеры, финансовые специалисты, технологические компании, агрегаторы и другие. Но у них есть одна общая черта: они хотят решать, как их контент используется системами ИИ.

Работа Cloudflare по созданию AI Crawl Control и Pay Per Crawl основана на простой философии: владельцы контента должны решать, как и когда другие получают доступ к их контенту. Многие наши клиенты хотят оптимизировать свой бренд и контент, чтобы гарантировать его присутствие в каждом наборе обучающих данных и в каждом новом поиске; другие хотят иметь больше контроля и разрешать доступ только при прямом вознаграждении.

Наши инструменты, такие как AI Search, AI Crawl Control и Pay Per Crawl, могут помочь, какое бы место в этом уравнении вы ни занимали. Важно то, что решение остается за владельцем контента.

С присоединением команды Human Native к Cloudflare мы ускоряем нашу работу по помощи клиентам в преобразовании их контента, чтобы он мог легко обрабатываться и пониматься ботами и агентами ИИ в дополнение к традиционной человеческой аудитории.

Сканирование (краулинг) — это сложный, дорогостоящий с точки зрения инженерных ресурсов и вычислительной мощности для обработки контента процесс, и он не дает гарантий контроля качества. Проиндексированный при сканировании контент может содержать дубликаты, спам, нелегальные материалы и множество других головных болей. В результате у разработчиков остается беспорядочная, неструктурированная информация.

Мы недавно анонсировали нашу работу по созданию AI Index — нового мощного способа как для компаний, создающих базовые модели, так и для агентов получать доступ к контенту в больших масштабах.

Вместо того чтобы слепо и многократно отправлять краулеры по открытому Интернету, разработчики ИИ смогут подключаться через модель публикации/подписки (pub/sub): участвующие веб-сайты будут предоставлять структурированные обновления при каждом изменении их контента, а разработчики смогут подписываться на получение этих обновлений в реальном времени.

Это открывает новые возможности для создателей контента экспериментировать с новыми бизнес-моделями.

Cloudflare активно инвестирует в создание основ для этих новых бизнес-моделей, начиная с x402.

Мы недавно объявили, что создаем Фонд x402 совместно с Coinbase, чтобы обеспечить транзакции «машина-машина» для цифровых ресурсов.

Платежи в Интернте исторически были разработаны для людей. Мы просматриваем сайт продавца, показываем намерение, добавляя товары в корзину, и подтверждаем намерение купить, вводя данные кредитной карты и нажимая «Оплатить». Но что, если вы хотите обеспечить прямые транзакции между автоматизированными системами? Нам нужны протоколы для транзакций «машина-машина».

Вместе Human Native и Cloudflare ускорят нашу работу по созданию основы этих новых экономических моделей для Интернета.

Интернет работает лучше всего, когда он открыт, справедлив и независимо устойчив. Мы рады приветствовать команду Human Native в Cloudflare и еще более воодушевлены тем, что мы вместе построим для улучшения основ Интернета в эпоху ИИ.