Перейти к содержимому
VinumExMachina Атлас ИИ в вине
Выберите язык: English

АтласО проекте

О проекте

Раздел § 1
Статус опубликовано
Обновлено
Языки EN · RU
Объём 72 зн. · 3 мин

Vinum ex Machina — это атлас искусственного интеллекта в вине, на русском и английском, по всей цепочке создания стоимости: виноградник, погреб и бизнес, который соединяет производителя с тем, кто вино пьёт. Он существует потому, что об этой теме пишут много, охотно и почти без цифр, — и потому, что цифры оказываются получаемыми, если каждый раз открывать источник, стоящий за утверждением.

Две вещи на этом сайте измерены, а не описаны, и вокруг них построено всё остальное.

Кейсбук — это 299 кейсов, проверенных по первоисточникам. Каждая запись была заново открыта по своему источнику, 287 из них — собственно ИИ, и у каждой стоит оценка того, насколько её собственный источник это подтверждает: рецензируемая статья и пресс-релиз вендора равно допустимы и не равны как доказательство. Восемь записей были удалены во время аудита — источник не пережил второго прочтения. Реестр фильтрует все 299 по пяти осям и печатает каждую из них прямо в отданной странице, так что корпус читается, ищется и печатается без выполнения нашего кода.

OenoBench — бенчмарк винных знаний для больших языковых моделей: 3 266 вопросов с выбором ответа в шести доменах и на четырёх уровнях сложности, 16 оценённых конфигураций моделей и версионированный JSON на каждый релиз. Он отвечает на более узкий вопрос, чем Кейсбук, и отвечает воспроизводимо: не «полезен ли ИИ в вине», а «сколько эта модель на самом деле знает».

Ключевой текст — это довод, который два набора данных поддерживают, а Исследования — место для собственных исследований атласа, когда они появятся. Пока их нет, и страница говорит об этом прямо, а не занимает место прогнозами.

Правило, на котором держится весь сайт

Число, которое набрано руками, — это число, которое устаревает. Каждый счёт в тексте здесь, включая абзацы выше, — это выражение, вычисляемое при сборке сайта из тех же файлов данных, из которых рисуются сами страницы. Изменится запись — изменится и предложение.

Это не эстетика. В исследовательском каталоге, с которого начался проект, шесть сводных таблиц, и три из них дают в сумме 295 вместо 299: их написали до третьей волны исследования и больше не пересчитывали, а главный вывод каталога опирается на знаменатель, которого уже нет. Ключевая статья писалась по этим таблицам, и около десяти её цифр пришлось согласовать с корпусом, прежде чем её можно было опубликовать рядом с ним. Ничего из этого себя не проявляло. Числа здесь вычисляются потому, что другого способа это заметить мы не нашли.

Тот же инстинкт проходит через остальное: рисунки лидерборда генерируются из файла прогона, а не заморожены в SVG; разница называется находкой только тогда, когда её доверительный интервал не включает ноль; а полоса разделения в реестре пересчитывается по той выборке, которую оставил фильтр, а не рисуется один раз и дальше лжёт.

Чем этот сайт не является

Он не каталог вендоров, и присутствие в Кейсбуке не является рекомендацией: в корпусе есть проекты, которые провалились, проекты, о провале которых заявлено публично, и утверждения, не пережившие собственных источников. Он не консалтинг. Он не живёт на рекламе, не ставит cookie, а его аналитика считает просмотры на нашем собственном домене, ничего не сохраняя на устройстве читателя и не храня идентификатор, переживающий смену суток.

Он также намеренно не закончен. Оба набора данных собраны одним человеком по опубликованным источникам, и это реальное ограничение, названное как ограничение на странице автора: Кейсбук фиксирует то, что подтверждает источник, а не то, что знает подвал.

Как он сделан

Статический сайт: Markdown и MDX в Git, сборка на Astro, отдача из Cloudflare Pages, без фреймворка на страницах с текстом. Оформление — переплетённый лабораторный отчёт: бумага, чернила, волосяные линейки, нарисованные шкалы, моноширинные подписи, табличные цифры; без скруглений, теней и цвета, который светится. Печатается каждая страница, в том числе из тёмной темы, а Кейсбук печатается реестром из 299 линованных строк.

Поправки — самое полезное, что этот проект получает, и адрес есть на странице автора.