Предложен, но не утверждён
Публикация предлагает протокол аудита. Это не принятый международный стандарт, не схема аккредитации и не действующая программа сертификации.
МЕТОД GEO-1000 / ПРОТОКОЛ АУДИТА / 0.9.0
Протокол измерения представления сущностей в генеративных системах на уровне мирового населения
Эта книга — не руководство по выполнению GEO. Это версионируемый проект протокола для измерения представления сущностей в разных продуктах, популяциях и языках, при разных состояниях доказательной базы и в разные моменты времени.
RU зафиксированный текст версии-кандидата v0.9.0
Протокол NOMOS описывает версионируемую процедуру аудита представления в генеративных системах. Он объясняет, что фиксировать, какими доказательствами подкреплять выводы и где следует воздержаться от суждения. Расчётный пример синтетический и не отражает результаты клиента.
ГРАНИЦА ПОЛНОМОЧИЙ / СТАТУС КАНДИДАТА
NOMOS публикуется для независимой проверки и критики. Его сила — в явных правилах, происхождении доказательств и ответственном пересмотре, а не в выдуманном заявлении о всеобщем признании.
Публикация предлагает протокол аудита. Это не принятый международный стандарт, не схема аккредитации и не действующая программа сертификации.
Реальный межпопуляционный бенчмарк не заявляется. Глава 18 — расчётная синтетическая демонстрация метода.
NOMOS — идентичность метода и критический голос, а не юридическое лицо или независимая ИИ-модель. За публикацию отвечает Kaan MURAZ.
АРХИТЕКТУРА ЧТЕНИЯ / 21 ГЛАВА
Протокол разделяет измеряемую сущность, целевую популяцию, состояние продукта, конституцию промпта, фиксацию, пакет проверенных данных, атомарные утверждения, критические блокировки, оценивание и управление соответствием.
Декларация прав на представление — Генеративные системы сейчас:
1 505 слов↗01K04 · K05 · K09Один ответ — ещё не оценка GEO — Этот раздел отвечает только на следующий вопрос:
5 972 слов↗02K04 · K05 · K09Представление — это распределение — Раздел 1 установил следующее положение:
7 017 слов↗03K10 · K11Что именно является объектом аудита? — Раздел 1 установил следующее положение:
6 896 слов↗04K10 · K11Два уровня реальности — Раздел 1 установил следующее положение:
7 400 слов↗05K04 · K05 · K06 · K07Релевантная пользовательская популяция для каждого ИИ-продукта — Первые четыре главы установили основные объекты измерения: один ответ не является оценкой GEO; представление — это условное распределение, а не одно число; аудируемый объект должен быть определен до того, как будут наблюдаться результаты; и ответ ИИ...
8 881 слов↗06K04 · K05 · K07 · K08Пропорциональная населению выборка GEO-1000 — Раздел 5 установил следующее положение:
9 445 слов↗07K04 · K06 · K07 · K20Панели странового наблюдения и языковой справедливости — Раздел 5 установил следующее положение:
8 661 слов↗08K04 · K05 · K06 · K07 · K08 · K22Отбор и взвешивание участников и смещение выборки — Глава 5 определила целевую пользовательскую аудиторию. Глава 6 преобразовала эту аудиторию в выборочный план, распределённый по странам, языкам и пользовательским интерфейсам. Глава 7 установила дополнительные системы наблюдения для малых стран и языков с...
9 800 слов↗09K02 · K03Реестр ИИ-систем и сопоставимость — Первые восемь глав установили следующее: один ответ не является оценкой GEO; представление является распределением; проверяемый объект должен быть идентифицирован до наблюдения результатов; официальное представление и проверенная реальность объекта должны оставаться раздельными;...
8 831 слов↗10K04 · K11 · K12 · K13Конституция промпта — Раздел 9 установил следующее положение:
10 659 слов↗11K02 · K03 · K04 · K06 · K22Контролируемая панель в стандартизированных условиях и панель пользователей в естественных условиях — Глава 9 показала, что измеряемый объект ИИ не может быть определен исключительно по провайдеру или названию модели. Глава 10 установила, что не каждый вопрос, содержащий одно и то же название сущности, является...
11 344 слов↗12K12 · K14 · K25 · K26Синхронные волны и фиксация NOMOS — Первые одиннадцать глав заложили основы измерений: один ответ не является GEO-оценкой; представление — это распределение по пользователям и условиям системы; проверяемый объект должен быть определен до наблюдения результатов; официальное представление и проверенная реальность...
11 059 слов↗13K10 · K11 · K12Пакет проверенных данных о сущности — Первые двенадцать глав установили экспериментальную цепочку: один ответ не является оценкой GEO; представление — это распределение среди пользователей и продуктов ИИ; проверяемая сущность должна быть определена до того, как наблюдаются результаты; официальное представление и...
12 825 слов↗14K27 · K28Атомарные утверждения и вынесение решений — Раздел 13 установил следующее положение:
12 632 слов↗15K03 · K20Критерии прохождения ответа и блокирующие пороги критических ошибок — Раздел 14 установил следующее положение:
12 721 слов↗16K08 · K09Архитектура оценивания NOMOS — Раздел 15 установил следующее положение:
11 110 слов↗17K03 · K09Дизайн синтетического теста Apple.com — Первые шестнадцать глав установили основные нормативные слои GEO-1000: проверяемое учреждение; целевая пользовательская группа и выборка; Панели наблюдателей страны и языковой справедливости; отбор участников и взвешивание; зарегистрированный экземпляр ИИ-продукта;...
12 027 слов↗18K03 · K09Сквозной синтетический аудит 30 000 ответов — Глава 17 определила Apple.com Синтетический Бенчмарк. Эта глава использует внутренне согласованную, арифметически проверенную демонстрацию в книге, чтобы показать, что потребует полная цепочка аудита:
10 366 слов↗19K15 · K16 · K17Знак соответствия, публичный реестр и независимое управление — Глава 18 ясно фиксирует, что метод NOMOS не полностью прошёл собственную синтетическую демонстрацию. Оставались два существенных пропуска в методике: сопоставление ссылок с утверждениями было недостаточно точным, а пропуски в материальных границах,...
12 215 слов↗20K18 · K19 · K23 · K24Открытый стандарт, приглашение университетам и передача NOMOS обществу — Первые девятнадцать глав превратили GEO из единственного утверждения о видимости в основанную на населении меру представления. Они отделили проверяемый объект от его домена, бренда и юридического лица; отделили официальное представление от...
11 934 слов↗ГЛОССАРИЙ / ИСТОЧНИКИ / МАШИННЫЙ СЛОЙ18 терминов · 28 методологических оснований · объект JSONЭта библиография — не список авторитетов, одобряющих каждое пороговое значение, специфичное для NOMOS. Она указывает методологические основы в области выборок, управления рисками, целостности данных, происхождения доказательств, согласованности оценщиков, открытых стандартов и оценки соответствия.
28 источников↗ПАРАЛЛЕЛЬНАЯ ПУБЛИКАЦИЯ ДЛЯ ЧЕЛОВЕКА И МАШИНЫ
Каждая языковая версия содержит полные страницы глав, точный JSON рукописи, полный Markdown, манифест целостности, запись для цитирования и машинный объект протокола. PDF сохраняет ту же версию в переносимом виде.
ПОСТОЯННАЯ АРХИВНАЯ ЗАПИСЬ / ZENODO
Зафиксированное для публикации издание хранится в Zenodo под отдельным DOI версии. Для ссылки на это конкретное издание используйте DOI версии; DOI концепции ведёт к полной истории версий.
Размещение в репозитории создаёт постоянный путь цитирования, но не означает рецензирования, аккредитации или независимой валидации.
ОФИЦИАЛЬНЫЕ ИЗДАНИЯ / ПОСТОЯННЫЕ ИДЕНТИФИКАТОРЫ
Для каждого языкового издания создана отдельная зафиксированная запись Zenodo и собственный DOI версии. При цитировании или скачивании выбирайте именно то издание, которым вы пользовались.