OpenVerifiableLLM

Проекты, которые следуют приведенным ниже лучшим практикам, могут добровольно и самостоятельно оценить себя и продемонстрировать, что они получили значок Open Source Security Foundation (OpenSSF).

Не существует набора практик, гарантирующего, что у программного обеспечения никогда не будет недостатков или уязвимостей; даже формальные методы могут не помочь, если спецификации или допущения ошибочны. Также не существует какой-либо практики, которая могла бы гарантировать, что проект будет поддерживать здоровое и хорошо функционирующее сообщество разработчиков. Однако следующие хорошие правила могут помочь улучшить результаты проектов. Например, некоторые правила описывают ревью несколькими участниками перед выпуском, что может помочь найти технические уязвимости, которые было бы сложно найти другим способом, и помочь построить доверие и желание дальнейшего взаимодействия между разработчиками из разных компаний. Чтобы получить значок, нужно выполнить все критерии с ключевыми словами "НЕОБХОДИМО"/"ОБЯЗАН"/"НЕДОПУСТИМО", все критерии со словом "СЛЕДУЕТ" либо должны удовлетворяться, либо должно быть приведено обоснование их невыполнения, и все критерии со словом "ЖЕЛАТЕЛЬНО" могут быть удовлетворены ИЛИ неудовлетворены (желательно, чтобы они были хотя бы рассмотрены). Если вы хотите ввести общий комментарий вместо объяснения, почему текущая ситуация приемлема, начните текст с '//' и пробела. Приветствуется обратная связь через сайт на GitHub в виде issues или pull requests. Существует также список рассылки для общих вопросов.

Мы с удовольствием предоставляем информацию на нескольких языках, однако, если есть какой-либо конфликт или несоответствие между переводами, английская версия является авторитетной.
Если это ваш проект, пожалуйста, покажите свой значок на странице проекта! Статус значка выглядит следующим образом: Уровень значка для проекта 15952 - in_progress Вот как вставить его:
Вы можете показать свой статус значка, вставив его в файл с разметкой Markdown:
[![OpenSSF Best Practices](https://www.bestpractices.dev/projects/15952/badge)](https://www.bestpractices.dev/projects/15952)
- или HTML:
<a href="https://www.bestpractices.dev/projects/15952"><img src="https://www.bestpractices.dev/projects/15952/badge"></a>


Это критерии уровня Passing. Вы также можете просмотреть критерии уровня Silver или Gold.

Baseline Series: Базовый уровень 1 Базовый Уровень 2 Базовый Уровень 3

        

 Основы 13/13 ●

  • Общая

    Обратите внимание, что другие проекты могут использовать то же имя.

    OpenVerifiableLLM provides open code and tools to train and verify small language models. It publishes data, checkpoints, and training records so users can recompute training segments and compare results bit for bit.

    Используйте формат выражения лицензии SPDX; примеры включают «Apache-2.0», «BSD-2-Clause», «BSD-3-Clause», «GPL-2.0+», «LGPL-3.0+», «MIT» и «(BSD-2-Clause OR Ruby)».
    Если используется более одного языка, перечислите их через запятую (пробелы необязательны), и отсортируйте их от наиболее до наименее используемого. Если список длинный, пожалуйста, перечислите по крайней мере три наиболее распространенных. Если языка нет (например, это проект только для документации или только для тестирования), используйте один символ «-» (минус). Для каждого языка используйте общепринятую капитализацию названия, например «JavaScript».
    Common Platform Enumeration (CPE) - это структурированная схема именования для информационных систем, программного обеспечения и пакетов. Она используется в ряде систем и баз данных для отчетов об уязвимостях.

    Assessment updated on 2026-10-27 using maintainer declarations and public evidence at main commit 874f0e728a6002b0daac6cddb0b9efa839a89faa. The initial public review used commit 81136541c83393f05a2d48b09910b4af07470412. Maintainer declarations support developer knowledge, the credential scan, and private CodeQL alert status. A broader public-history review left vulnerability_report_response unconfirmed because PR #118 needs response classification and the complete private reporting history has not been checked. The static_analysis answer describes the current release process and states the historical v1.0.0 timing. Bug and enhancement response counts retain the review window 2026-08-26 through 2026-10-26.

  • Основная информация на веб-сайте проекта


    Достаточно для значка!

    Веб-сайт проекта ОБЯЗАН кратко описывать, что делает программное обеспечение (какую проблему решает?). [description_good]
    Описание ОБЯЗАНО быть на языке, который могут понять потенциальные пользователи (например, с минимумом жаргона).

    The README explains that users can check language-model training by recomputing published training segments and comparing checkpoints. It describes the problem, goals, current results, and limits. https://github.com/AOSSIE-Org/OpenVerifiableLLM#readme


    Достаточно для значка!

    Веб-сайт проекта ОБЯЗАН предоставлять информацию о том, как: получать и предоставлять обратную связь (например, отчеты об ошибках или улучшения) и вносить свой вклад в программное обеспечение. [interact]

    The README provides download and setup instructions. It links to GitHub issues and CONTRIBUTING.md. The contribution guide explains how to report bugs and propose changes. https://github.com/AOSSIE-Org/OpenVerifiableLLM#readme https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/CONTRIBUTING.md


    Достаточно для значка!

    В описании того, как сделать вклад, НЕОБХОДИМО объяснить процесс внесения вклада (например, используются ли pull request'ы). (Требуется URL) [contribution]
    Мы предполагаем, что проекты на GitHub используют issues и pull requests, если не указано иное. Описание может быть кратким, например, указывать, что проект использует pull requests, issue tracker или сообщения в список рассылки (какой?).

    CONTRIBUTING.md explains issue discussion, development branches, pull requests against main, tests, and maintainer review. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/CONTRIBUTING.md


    Достаточно для значка!

    В информацию о том, как внести вклад, СЛЕДУЕТ включать требования к приемлемым взносам (например, ссылку на любой требуемый стандарт кодирования). (Требуется URL) [contribution_requirements]

    CONTRIBUTING.md requires focused changes, test execution, success and failure tests for verification changes, preservation of reproducibility guarantees, dependency locks, and documentation updates. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/CONTRIBUTING.md


  • Свободная лицензия


    Достаточно для значка!

    ПО, создаваемое проектом, ОБЯЗАНО быть выпущено под свободной лицензией. [floss_license]
    Свободное ПО (далее СПО) - это программное обеспечение, которое соответствует Определению Открытого ПО (официальный текст на англ.) или Определению Свободного Программного Обеспечения. Примеры таких лицензий включают CC0, MIT, BSD 2-Clause, BSD 3-Clause, Apache 2.0, Меньшая стандартная общественная лицензия GNU (LGPL) и Стандартная общественная лицензия GNU (GPL). Для наших целей это означает, что лицензия ОБЯЗАНА быть: ПО МОЖЕТ одновременно лицензироваться на других условиях (например, приемлема комбинация «GPLv2 или закрытая лицензия»).

    The project is released under GNU GPL version 3. The README declares the license, and the repository root contains the complete GPLv3 text. https://github.com/AOSSIE-Org/OpenVerifiableLLM#readme https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/LICENSE


    Достаточно для значка!

    ЖЕЛАТЕЛЬНО, чтобы все лицензии для ПО, создаваемого проектом, были одобрены Open Source Initiative (OSI). [floss_license_osi]
    Для одобрения OSI используется строгий процесс, чтобы определить, какие лицензии соответствуют Открытому ПО.

    The project's declared license is GNU GPL version 3, an OSI-approved license. The complete license text is in the repository root. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/LICENSE https://opensource.org/license/gpl-3.0


    Достаточно для значка!

    Проект ОБЯЗАН публиковать лицензию или лицензии своих результатов в стандартном расположении в своем репозитории исходного кода. (Требуется URL) [license_location]
    Например, в качестве файла верхнего уровня с именем LICENSE или COPYING. Имена файлов лицензии МОГУТ сопровождаться расширением, таким как «.txt» или «.md». Другим соглашением может быть наличие каталога с именем LICENSES, содержащего файлы лицензий; имена этих файлов обычно соответствуют SPDX-идентификатору лицензии, за которым следует соответствующее расширение файла, как описано в спецификации REUSE . Обратите внимание, что этот критерий является обязательным только для репозитория с исходным кодом. Вам НЕ нужно включать файл лицензии при генерации чего-либо из исходного кода (например, исполняемого файла, пакета или контейнера). Например, при создании пакета R для Comprehensive R Archive Network (CRAN) рекомендуется следовать стандартной практике CRAN: если лицензия является стандартной, используйте стандартную короткую спецификацию лицензии (чтобы избежать установки еще одной копии текста) и добавьте файл LICENSE в списке исключений, например .Rbuildignore. Аналогично, при создании пакета Debian вы можете поместить в файл copyright ссылку на текст лицензии в /usr/share/common-licenses и исключить файл лицензии из созданного пакета (например, удаляя файл после вызова dh_auto_install). Мы рекомендуем включать машиночитаемую информацию о лицензии в сгенерированных форматах, где это возможно.

    The repository root contains the complete, unmodified GNU General Public License version 3. The file matches the official GNU text byte for byte. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/LICENSE https://www.gnu.org/licenses/gpl-3.0.txt


  • Документация


    Достаточно для значка!

    Проект ОБЯЗАН предоставлять базовую документацию для программного обеспечения, создаваемого проектом. [documentation_basics]
    Эта документация должна быть в некоторых формах (таких как текст или видео), которые включают в себя: как установить программное обеспечение, как его запустить, как его использовать (возможно, с помощью учебника с примерами) и как использовать его безопасно (например, что делать и чего не делать), если эти темы применимы для данного программного обеспечения. Документация по безопасности не обязательно должна быть длинной. Проект МОЖЕТ использовать гипертекстовые ссылки для не-проектных материалов в качестве документации. Если проект не создает программное обеспечение, выберите «неприменимо» (N/A).

    The README and guides document dependency installation, supported hardware, downloads, verification commands, and testing. The documentation index identifies active and legacy components. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/simple/README.md https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/docs/README.md


    Достаточно для значка!

    Проект ОБЯЗАН предоставлять справочную документацию, описывающую внешний интерфейс (как входной, так и выходной) программного обеспечения, создаваемого проектом. [documentation_interface]
    Документация внешнего интерфейса объясняет конечному пользователю или разработчику, как его использовать. Это может включать в себя интерфейс прикладного программирования (API), если программное обеспечение его имеет. Если это библиотека, документируйте основные классы/типы и методы/функции, которые можно вызвать. Если это веб-приложение, определите его URL-интерфейс (часто его интерфейс REST). Если это интерфейс командной строки, документируйте параметры и настройки, которые он поддерживает. Во многих случаях лучше всего, если большая часть этой документации будет автоматически сгенерирована, чтобы эта документация была синхронизирована с программным обеспечением по мере его изменения, но это не требуется. Проект МОЖЕТ использовать гипертекстовые ссылки для не-проектных материалов в качестве документации. Документация МОЖЕТ быть автоматически сгенерирована (там, где это применимо, это часто наилучший способ создания документации). Документация интерфейса REST может быть сгенерирована с использованием Swagger/OpenAPI. Документация по интерфейсу кода МОЖЕТ быть сгенерирована с использованием таких инструментов, как JSDoc (JavaScript), ESDoc (JavaScript), pydoc (Python), devtools (R), pkgdown (R) и Doxygen (многие языки). Просто иметь комментарии в коде реализации недостаточно для выполнения этого критерия; должен быть простой способ увидеть информацию без чтения всего исходного кода. Если проект не создает программное обеспечение, выберите «неприменимо» (N/A).

    The command guide describes inputs, commands, and generated records. The segment guide documents selection variables and MATCH/MISMATCH outputs. The artifact-verifier guide documents inputs, options, generated files, and verification behavior. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/simple/README.md https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/docs/guides/check_a_segment.md https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/docs/guides/ovllm_verify.md


  • Другое


    Достаточно для значка!

    Сайты проекта (веб-сайт, репозиторий и URL-адреса для загрузки) ОБЯЗАНЫ поддерживать HTTPS с использованием TLS. [sites_https]
    Для выполнения этого критерия требуется, чтобы URL домашней страницы проекта начинался с "https:", а не "http:". Вы можете получить бесплатные сертификаты от проекта Let's Encrypt. Проекты МОГУТ выполнить этот критерий, используя (например) GitHub Pages, GitLab Pages или проектные страницы SourceForge. Если вы поддерживаете HTTP, мы настоятельно рекомендуем перенаправить HTTP-трафик на HTTPS.

    The project website and source repository use HTTPS on GitHub. Published release files are available through HTTPS on Hugging Face. https://github.com/AOSSIE-Org/OpenVerifiableLLM https://huggingface.co/datasets/AOSSIE/openverifiable-enwiki-20260901-20260918-r1-evidence/tree/main/release/simple-run


    Достаточно для значка!

    Проект ОБЯЗАН иметь один или несколько механизмов для обсуждения (включая предлагаемые изменения и проблемы), которые доступны для поиска, позволяют ссылаться на сообщения и темы по URL, позволяют новым людям участвовать в некоторых обсуждениях и не требуют установки на стороне клиента проприетарного программного обеспечения. [discussion]
    Примерами приемлемых механизмов являются архивируемые списки рассылки, обсуждения в GitHub issues и pull requests, Bugzilla, Mantis и Trac. Асинхронные механизмы обсуждения (например, IRC) приемлемы, если они отвечают этим критериям; убедитесь, что есть механизм архивирования URL-адресов. Разрешено, хотя и не рекомендуется, использовать проприетарный JavaScript.

    The public GitHub issue tracker and pull requests provide searchable discussions with stable URLs. Contributors can participate through a web browser. https://github.com/AOSSIE-Org/OpenVerifiableLLM/issues https://github.com/AOSSIE-Org/OpenVerifiableLLM/pulls


    Достаточно для значка!

    Проекту СЛЕДУЕТ предоставлять документацию на английском языке и иметь возможность принимать отчеты об ошибках и комментарии о коде на английском языке. [english]
    Английский в настоящее время является лингва франка компьютерной техники; Поддержка английского языка увеличивает число потенциальных разработчиков и рецензентов во всем мире. Проект может соответствовать этому критерию, даже если английский не является основным языком его ключевых разработчиков.

    The README, contribution guide, and user guides are in English. The issue tracker contains English bug reports and discussions. https://github.com/AOSSIE-Org/OpenVerifiableLLM#readme https://github.com/AOSSIE-Org/OpenVerifiableLLM/issues


    Достаточно для значка!

    НЕОБХОДИМО, чтобы проект поддерживался. [maintained]
    Как минимум, проект должен пытаться реагировать на сообщения о серьезных проблемах и уязвимостях. Проект, который активно добивается получения значка, вероятно, и поддерживается тоже. Ресурсы любого проекта и человека ограничены, и обычно проекты будут отклонять некоторые предлагаемые изменения; поэтому ограниченность ресурсов и отклонение предложений сами по себе не указывают на то, что проект не поддерживается.

    Если известно, что проект больше не будет поддерживаться, следует установить для этого критерия значение «Не соответствует» и использовать подходящие механизмы, чтобы указать другим, что он не поддерживается. Например, используйте “DEPRECATED” («УСТАРЕЛ») в качестве первого заголовка в файле README, добавьте “DEPRECATED” в начале его домашней страницы, добавьте “DEPRECATED” в начало описания проекта репозитория кода, добавьте значок об отсутствии поддержки в README проекта и/или домашнюю страницу, пометьте его как устаревший в любых репозиториях пакетов (напр., npm deprecate ) и/или используйте механизм, предоставленный репозиторием кода для его архивирования (например, параметр "archive" у GitHub или пометка "archive" у GitLab, статус «только для чтения» у Gerrit или статус «брошенного» проекта у SourceForge). Дополнительное обсуждение можно найти здесь .

    The project has current commits, reviewed pull requests, and named maintainers. Recent merged PRs restored the full license, hardened archive extraction, and documented a private security contact. The reviewed main commit is 874f0e728a6002b0daac6cddb0b9efa839a89faa. https://github.com/AOSSIE-Org/OpenVerifiableLLM/commit/874f0e728a6002b0daac6cddb0b9efa839a89faa https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/MAINTAINERS.md


 Управление изменениями 9/9 ●

  • Публичное хранилище исходного кода с поддержкой версий


    Достаточно для значка!

    Проект ОБЯЗАН иметь репозиторий (хранилище) исходного кода с управлением версиями, который является общедоступным и имеет URL. [repo_public]
    URL МОЖЕТ быть таким же, как URL проекта. Проект МОЖЕТ использовать частные (непубличные) ветви в конкретных случаях, когда изменение не выпускается публично (например, для устранения уязвимости до того, как она будет открыта для публики).

    The project's Git repository is publicly readable at a stable URL. https://github.com/AOSSIE-Org/OpenVerifiableLLM


    Достаточно для значка!

    Проектный репозиторий исходного кода ОБЯЗАН отслеживать, какие изменения были внесены, кто внес изменения и когда изменения были сделаны. [repo_track]

    Git records source changes, authors, and commit dates. The public commit history is available on GitHub. https://github.com/AOSSIE-Org/OpenVerifiableLLM/commits/main/


    Достаточно для значка!

    Чтобы обеспечить возможность для проверки другими участниками, проектный репозиторий исходного кода ОБЯЗАН включать промежуточные версии для проверки между релизами; НЕДОПУСТИМО хранить в репозитории лишь финальные версии. [repo_interim]
    Проекты МОГУТ опускать отдельные промежуточные версии из своих публичных репозиториев (например, те, которые фиксируют отдельные не обнародованные уязвимости, никогда не будут публично выпущены или включают материалы, которые не могут быть опубликованы на законных основаниях и не находятся в финальной версии).

    The public main branch and pull requests contain intermediate changes for review between releases. The repository is not limited to final release snapshots. https://github.com/AOSSIE-Org/OpenVerifiableLLM/commits/main/ https://github.com/AOSSIE-Org/OpenVerifiableLLM/pulls


    Достаточно для значка!

    Для хранилища проектного исходного кода ЖЕЛАТЕЛЬНО использовать типовое ПО для распределенного управления версиями (например, git). [repo_distributed]
    Не требуется именно git, и проекты могут использовать централизованное программное обеспечение для управления версиями (например, Subversion) с обоснованием.

    The project uses Git, a distributed version control system, hosted on GitHub. https://github.com/AOSSIE-Org/OpenVerifiableLLM


  • Уникальная нумерация версий


    Достаточно для значка!

    Результаты проекта ОБЯЗАНЫ иметь уникальный идентификатор версии для каждой версии, предназначенной для конечных пользователей. [version_unique]
    Это МОЖНО выполнить различными способами, включая идентификаторы коммита (например, идентификатор коммита git или идентификатор набора изменений mercurial) или номер версии (включая номера версий, которые используют семантическое версионирование или схемы на основе даты, такие как YYYYMMDD).

    The published release is identified as v1.0.0. Its Git tag identifies the source, and the release notes pin the downloadable evidence to a full Hugging Face revision. https://github.com/AOSSIE-Org/OpenVerifiableLLM/releases/tag/v1.0.0


    Достаточно для значка!

    Для выпусков ЖЕЛАТЕЛЬНО использовать семантическую либо календарную нумерацию версий. При использовании календарной нумерации к версии ЖЕЛАТЕЛЬНО добавлять микро-компоненту. [version_semver]
    МОЖНО использовать в качестве номеров версий другие схемы нумерации версий, такие как идентификаторы коммитов (например, идентификатор коммита в git или идентификатор набора изменений в mercurial) или схемы на основе даты, такие как YYYYMMDD, поскольку они уникальны. Некоторые альтернативы могут вызвать трудности, поскольку пользователи могут быть не в состоянии легко определить, используют ли они последнюю версию. SemVer может оказаться менее полезным для идентификации версий программного обеспечения, если все получатели используют только последнюю версию (например, это код для одного веб-сайта или интернет-сервиса, который постоянно обновляется с помощью непрерывной доставки).

    The project uses the major.minor.patch version format: v1.0.0 for the release and 1.0.0 in the Python package metadata. https://github.com/AOSSIE-Org/OpenVerifiableLLM/releases/tag/v1.0.0 https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/pyproject.toml


    Достаточно для значка!

    Проектам ЖЕЛАТЕЛЬНО идентифицировать каждый выпуск в своей системе управления версиями. Например, при использовании git ЖЕЛАТЕЛЬНО идентифицировать каждую версию, используя теги git. [version_tags]

    The v1.0.0 Git tag identifies the published release in version control. https://github.com/AOSSIE-Org/OpenVerifiableLLM/tree/v1.0.0


  • Примечания к выпуску


    Достаточно для значка!

    Проект ОБЯЗАН предоставлять с каждой выпускаемой версией замечания к выпуску - удобочитаемые человеком сведения об основных изменениях в этом выпуске, помогающие пользователям определить, должны ли они обновляться и какими будут последствия обновления. НЕДОПУСТИМО делать замечания к выпуску сырым выводом журнала управления версиями (например, результаты команды «git log» не являются замечаниями к выпуску). Проекты, результаты которых не предназначены для повторного использования в нескольких местах (например, программное обеспечение для одного веб-сайта или службы) И выдаются через непрерывную доставку (continuous delivery) МОГУТ выбрать «неприменимо» (N/A). (Требуется URL) [release_notes]
    Замечания к выпуску МОГУТ быть реализованы различными способами. Многие проекты предоставляют их в файле с именем «NEWS», «CHANGELOG» или «ChangeLog», возможно с расширениями, такими как «.txt», «.md» или «.html». Исторически термин «журнал изменений» означал журнал для каждого изменения, но для соответствия этим критериям требуется человекочитаемая сводка. Замечания к выпуску МОГУТ вместо этого быть предоставлены механизмами системы контроля версий, такими как процесс GitHub Releases.

    The v1.0.0 release includes a human-readable summary of features, verifier changes, downloads, results, usage, and known limitations. It is not a raw version-control log. https://github.com/AOSSIE-Org/OpenVerifiableLLM/releases/tag/v1.0.0


    Достаточно для значка!

    В замечаниях о выпуске НЕОБХОДИМО упоминать каждую общеизвестную уязвимость, исправленную ​​в каждой новой версии, для которой существует CVE или аналогичная публичная запись. Критерий может быть отмечен как неприменимый (N/A), если у пользователей обычно нет практической возможности обновить данное ПО самостоятельно (это часто относится к, например, обновлениям ядра операционной системы). Если замечаний о выпуске не публиковалось или не было обнародованных уязвимостей, отвечайте "неприменимо". [release_notes_vulns]
    Этот критерий помогает пользователям определить, исправит ли данное обновление общеизвестную уязвимость, чтобы помочь пользователям принять обоснованное решение об обновлении. Если пользователи обычно не могут практически самостоятельно обновлять программное обеспечение на своих компьютерах, а вместо этого должны полагаться на одного или нескольких посредников для выполнения обновления (как это часто бывает с ядром и низкоуровневым программным обеспечением, которое взаимосвязано с ядром), проект вместо этого можно выбрать «Неприменимо», поскольку эта дополнительная информация будет бесполезна для таких пользователей. Аналогично, проект может выбрать «неприменимо» (N/A), если все получатели используют только последнюю версию (например, это код для одного веб-сайта или интернет-службы, который постоянно обновлен при помощи непрерывной доставки). Этот критерий применим только к результатам проекта, а не к его зависимостям. Перечисление уязвимостей всех транзитивных зависимостей проекта становится громоздким, поскольку зависимости увеличиваются и изменяются; и в этом нет необходимости, поскольку инструменты, которые исследуют и отслеживают зависимости, могут делать это более масштабируемым способом.

    Maintainer confirmation, 2026-10-27: no vulnerability fixed in v1.0.0 had a CVE, GHSA, or similar assigned vulnerability identifier when that release was created. The release notes describe the included verifier security fixes and reference PRs #204, #207, #210, and #218. Future release notes will identify each fixed vulnerability that has an assigned identifier. https://github.com/AOSSIE-Org/OpenVerifiableLLM/releases/tag/v1.0.0


 Отчеты о проблемах 7/8 ●

  • Процесс сообщения об ошибках


    Достаточно для значка!

    Проект ОБЯЗАН предоставить пользователям возможность отправлять сообщения об ошибках (например, используя систему отслеживания ошибок или список рассылки). (Требуется URL) [report_process]

    Users can submit bug reports through GitHub issues. CONTRIBUTING.md specifies the command, environment, expected result, and actual result to include. https://github.com/AOSSIE-Org/OpenVerifiableLLM/issues https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/CONTRIBUTING.md#reporting-bugs


    Достаточно для значка!

    СЛЕДУЕТ использовать трекер вопросов (issue tracker) для отслеживания отдельных вопросов. [report_tracker]

    The project uses the public GitHub issue tracker to record and track individual bugs. https://github.com/AOSSIE-Org/OpenVerifiableLLM/issues


    Достаточно для значка!

    Проект ОБЯЗАН подтверждать получение большинства сообщений об ошибках, отправленных за последние 2-12 месяцев (включительно); подтверждение не обязательно включает исправление. [report_responses]

    Reviewed public bug reports created from 2026-08-26 through 2026-10-26. At least 9 of 17 reports received direct maintainer acknowledgment (52.9%): the maintainer closed #192, #194, #196, #200, #205, #206, #209, and #212, and assigned #223. Automated welcome messages and reporter self-comments were excluded. https://github.com/AOSSIE-Org/OpenVerifiableLLM/issues https://github.com/AOSSIE-Org/OpenVerifiableLLM/issues/223 https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/MAINTAINERS.md


    Достаточно для значка!

    Проекту СЛЕДУЕТ реагировать на большинство (>50%) запросов на улучшения в течение последних 2-12 месяцев (включительно). [enhancement_responses]
    В качестве ответа МОЖЕТ быть «нет» или обсуждение выгод от данного улучшения. Цель состоит в том, чтобы по крайней мере на некоторые запросы был какой-то ответ, что указывает на то, что проект все еще жив. Для целей этого критерия не нужно учитывать поддельные запросы (например, от спамеров или автоматизированных систем). Если проект больше не принимает улучшения, выберите «не соответствует» и укажите URL, проясняющий ситуацию для пользователей. Если проект большую часть времени перегружен количеством запросов на улучшения, выберите «не cоответствует» и объясните.

    Reviewed public enhancement requests recorded as issues from 2026-08-26 through 2026-10-26. The one documentation enhancement in this window, #176, received a maintainer response through its linked implementation PR #191 on 2026-10-25. The response explained the project scope change and invited an updated contribution (1 of 1 requests). https://github.com/AOSSIE-Org/OpenVerifiableLLM/issues/176 https://github.com/AOSSIE-Org/OpenVerifiableLLM/pull/191#issuecomment-6397651721


    Достаточно для значка!

    Проект ОБЯЗАН иметь общедоступный архив для отчетов и ответов для последующего поиска. (Требуется URL) [report_archive]

    GitHub publicly archives issue reports, comments, and status changes. Open and closed reports remain searchable and have stable URLs. https://github.com/AOSSIE-Org/OpenVerifiableLLM/issues?q=is%3Aissue


  • Процесс отчета об уязвимостях


    Достаточно для значка!

    Проект ОБЯЗАН публиковать процесс уведомления об уязвимостях на сайте проекта. (Требуется URL) [vulnerability_report_process]
    Например, четко обозначенный почтовый адрес на https://PROJECTSITE/security, часто в форме security@example.org. Процесс МОЖЕТ быть таким же, как и процесс для отчетов об ошибках. Отчеты об уязвимостях МОГУТ быть всегда общедоступными, но многие проекты имеют приватный механизм для отправки отчетов об уязвимостях.

    The README and MAINTAINERS.md link to AOSSIE's security policy. The policy describes vulnerability reporting, the information to include, and the response process. https://github.com/AOSSIE-Org/.github/blob/master/SECURITY.md https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/MAINTAINERS.md


    Достаточно для значка!

    Если поддерживаются приватные отчеты об уязвимости, проект ОБЯЗАН включить описание того, как отправлять сведения конфиденциальным способом. (Требуется URL) [vulnerability_report_private]
    Примеры включают приватный отчет о дефектах, отправленный в Интернете с использованием HTTPS (TLS) или электронной почты, зашифрованной с использованием OpenPGP. Если отчеты об уязвимостях всегда являются общедоступными (поэтому нет приватных отчетов об уязвимостях), выберите «неприменимо» (N/A).

    MAINTAINERS.md documents private vulnerability reporting by email to rajat.roy@aossie.org or by Discord direct message to the maintainer, reoarei. Reports should include the affected file or command, reproduction steps, and impact. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/MAINTAINERS.md#reporting-a-vulnerability


    Недостаточно для значка.

    Проект ОБЯЗАН обеспечивать время первоначального отклика на любой отчет об уязвимости, полученный за последние 6 месяцев, в пределах 14 дней или меньше. [vulnerability_report_response]
    Если за последние 6 месяцев не было обнаружено никаких уязвимостей, выберите «неприменимо» (N/A).

    One vulnerability report in the last six months did not receive a human response within 14 days. PR #118 (opened 2026-09-21) described a signer-trust bypass. Its first human maintainer reply came on 2026-10-25, 34 days later. Before that it had only automated responses. https://github.com/AOSSIE-Org/OpenVerifiableLLM/pull/118

    Every vulnerability report since then received a maintainer response within 14 days. The longest wait was 3 days 7 hours:

    • #200 (19 Oct): replied after 9 h
    • #205 (22 Oct): replied after 3 d 7 h
    • #206 (22 Oct): replied after 3 d 3 h
    • #209 (22 Oct): replied after 3 d 1 h
    • #222 (25 Oct): replied after 22 h
    • #238 (26 Oct): replied after 9 h

    MAINTAINERS.md now documents a private reporting route and commits to replying within 14 days. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/MAINTAINERS.md#reporting-a-vulnerability

    This criterion will be re-evaluated once #118 leaves the six-month window, on 2027-03-21.


 Качество 13/13 ●

  • Рабочая система сборки


    Достаточно для значка!

    Если программное обеспечение, создаваемое проектом, требует сборки для использования, проект ОБЯЗАН предоставить рабочую систему сборки, которая может автоматически пересобирать программное обеспечение из исходного кода. [build]
    Система сборки определяет, какие действия необходимо предпринять для пересборки программного обеспечения (и в каком порядке), а затем выполняет эти действия. Например, она может вызывать компилятор для компиляции исходного кода. Если исполняемый файл создается из исходного кода, должна иметься возможность изменить исходный код проекта, а затем сгенерировать обновленный исполняемый файл с этими изменениями. Если программное обеспечение, создаваемое проектом, зависит от внешних библиотек, система сборки не обязана пересобирать эти внешние библиотеки. Если для использования программного обеспечения после изменения его исходного кода пересборка не требуется, выберите «неприменимо» (N/A).

    The project has a PEP 517 build configuration using setuptools and wheel. CI successfully installs the source with pip install -e ".[pipeline]". https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/pyproject.toml https://github.com/AOSSIE-Org/OpenVerifiableLLM/actions/runs/40418247539


    Достаточно для значка!

    ЖЕЛАТЕЛЬНО использовать общеупотребительные инструменты для сборки программного обеспечения. [build_common_tools]
    Например, Maven, Ant, cmake, autotools, make, rake или devtools (R).

    The build uses standard Python packaging tools: pip, setuptools, and wheel. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/pyproject.toml


    Достаточно для значка!

    Для сборки проекта СЛЕДУЕТ использовать только инструменты со свободными лицензиями. [build_floss_tools]

    Python, pip, setuptools, and wheel provide the source build and installation process. The build does not require a proprietary build tool. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/pyproject.toml https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/.github/workflows/ci.yml


  • Набор автотестов


    Достаточно для значка!

    Проект ОБЯЗАН использовать по крайней мере один автоматизированный набор тестов, опубликованный как свободное ПО (этот набор тестов может поддерживаться как отдельный проект свободного ПО). Проект ОБЯЗАН ясно показывать или иметь документацию о том, как запускать наборы тестов (например, через непрерывную интеграцию (CI) или используя файлы документации, такие как BUILD.md, README.md или CONTRIBUTING.md). [test]
    Проект МОЖЕТ использовать несколько автоматизированных наборов тестов (например, один, который работает быстро, а другой - более тщательный, но требует специального оборудования). Существует множество каркасов (frameworks) и систем поддержки тестирования, включая Selenium (автоматизация веб-браузера), Junit (JVM, Java), RUnit (R), testthat (R).

    The public repository includes an automated pytest/unittest suite under the project's declared GPL-3.0 license. CONTRIBUTING.md documents how to run it, and CI runs the suite. https://github.com/AOSSIE-Org/OpenVerifiableLLM/tree/main/tests https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/CONTRIBUTING.md#development-setup https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/.github/workflows/ci.yml


    Достаточно для значка!

    Запуск набора тестов СЛЕДУЕТ реализовывать стандартным способом для этого языка. [test_invocation]
    Например, «make check», «mvn test» или «rake test» (Ruby).

    The suite uses the standard Python invocation: python -m pytest -q tests. A smaller CPU suite for simple/ is also documented. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/CONTRIBUTING.md#development-setup


    Едва достаточно для значка.

    ЖЕЛАТЕЛЬНО охватывать набором тестов большинство (а в идеале все) ветви кода, поля ввода и функциональные возможности. [test_most]

    The project checklist records incomplete test coverage, especially GPU training paths in simple/ovl.py. CI measures statement coverage, but broad branch coverage across the active software is not established. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/BestPracticesChecklist.md#automated-testing https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/.github/workflows/ci.yml


    Достаточно для значка!

    ЖЕЛАТЕЛЬНО реализовать непрерывную интеграцию (Continuous Integration - частая интеграция нового или измененного кода в центральное хранилище кода, и запуск автоматических тестов на получившейся базе кода). [test_continuous_integration]

    GitHub Actions runs automated tests on pushes to main and pull requests. CI passed on main commit 874f0e728a6002b0daac6cddb0b9efa839a89faa. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/.github/workflows/ci.yml https://github.com/AOSSIE-Org/OpenVerifiableLLM/actions/runs/40418247539


  • Тестирование новых функций


    Достаточно для значка!

    Проект ОБЯЗАН иметь общую политику (формальную или нет), обязывающую добавлять тесты в набор автоматических тестов по мере добавления новых функциональных возможностей к программному обеспечению, создаваемому проектом. [test_policy]
    Если есть действующая политика, хотя бы «из уст в уста», которая говорит, что разработчики должны добавлять тесты в набор автотестов для новой функциональности, указывайте «соответствует».

    CONTRIBUTING.md requires test execution and success/failure tests for changes to verification, serialization, RNG/optimizer state, and the manifest. New verification behavior must extend the falsifiability tests. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/CONTRIBUTING.md#making-changes


    Достаточно для значка!

    Проект ОБЯЗАН иметь доказательства того, что критерий test_policy о добавлении тестов соблюдался при недавних крупных изменениях ПО, создаваемого проектом. [tests_are_added]
    Крупная функциональность обычно упоминается в замечаниях к выпуску. Совершенство не требуется, просто доказательство того, что на практике тесты обычно добавляются в набор автотестов, когда к ПО, создаваемому проектом, добавляются новые крупные функции.

    Recent major changes include tests. PR #217 added the simple training loop and weight-verdict tests. PR #208 added CPU loop tests. PR #218 added a regression test for missing artifact hashes. https://github.com/AOSSIE-Org/OpenVerifiableLLM/pull/217 https://github.com/AOSSIE-Org/OpenVerifiableLLM/pull/208 https://github.com/AOSSIE-Org/OpenVerifiableLLM/pull/218


    Достаточно для значка!

    ЖЕЛАТЕЛЬНО задокументировать эту политику добавления тестов (см. критерий test_policy) в инструкции к предложениям об изменениях. [tests_documented_added]
    Однако даже неформальное правило приемлемо, если тесты добавляются на практике.

    The contribution instructions state when contributors must add tests and require clean and tampered verification cases. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/CONTRIBUTING.md#making-changes


  • Флаги предупреждений


    Достаточно для значка!

    Проект ОБЯЗАН включать один или несколько предупреждающих флагов компилятора, «безопасный» языковой режим или использовать отдельный инструмент «linter» для поиска ошибок качества кода или типовых простых ошибок, если есть хотя бы один инструмент на свободном ПО, который может реализовать этот критерий на выбранном языке. [warnings]
    Примером предупреждающего флага компилятора может служить "-Wall" для gcc/clang. Примеры «безопасного» языкового режима включают «use strict» в JavaScript и «use warnings» в perl5. Отдельный инструмент «linter» - это просто инструмент, который исследует исходный код для поиска ошибок качества кода или типовых простых ошибок. Всё это обычно включается в исходный код или инструкции сборки.

    CI runs Ruff on the active training loop, artifact-verifier modules, and their tests. Enabled rules include pycodestyle errors, Pyflakes, and flake8-bugbear. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/pyproject.toml https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/.github/workflows/ci.yml


    Достаточно для значка!

    Проект ОБЯЗАН обращать внимание на предупреждения. [warnings_fixed]
    Речь о предупреждениях, найденных при выполнении критерия warnings. Проект должен исправлять предупреждения или отмечать их в исходном коде как ложные срабатывания. В идеале не должно быть никаких предупреждений, но проект МОЖЕТ принимать существование каких-то предупреждений (обычно менее 1 предупреждения на 100 строк или менее 10 предупреждений).

    The CI Ruff step passed on main commit 874f0e728a6002b0daac6cddb0b9efa839a89faa. The configuration documents limited exceptions for compact source style, import placement, and the unchanged training-data path. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/pyproject.toml https://github.com/AOSSIE-Org/OpenVerifiableLLM/actions/runs/40418247539


    Едва достаточно для значка.

    ЖЕЛАТЕЛЬНО, чтобы проекты использовали самый строгий режим предупреждений в производимом ПО, где это целесообразно. [warnings_strict]
    Некоторые предупреждения не могут быть эффективно задействованы в некоторых проектах. Что необходимо в этом критерии - это доказательства того, что проект стремится включать флаги предупреждений там, где это возможно, чтобы ошибки обнаруживались на ранней стадии.

    Ruff uses selected rule groups and a limited active-code scope. The project checklist records that maximum practical warning strictness is not yet met. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/BestPracticesChecklist.md#linting--warning-flags https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/pyproject.toml


 Безопасность 16/16 ●

  • Знание безопасной разработки


    Достаточно для значка!

    По крайней мере один основной разработчик на проекте ОБЯЗАН знать, как проектировать безопасное программное обеспечение (точные требования описаны в подробностях к критерию). [know_secure_design]
    Это требует понимания следующих принципов проектирования, в том числе 8 принципов из Saltzer and Schroeder:
    • экономичность механизма (поддерживать дизайн ПО настолько простым и компактным, насколько практически возможно, например, с помощью массовых упрощений)
    • отказобезопасные значения по умолчанию (доступ по умолчанию должен быть запрещен, а установка проектов по умолчанию должна быть в защищенной конфигурации)
    • полное разграничение (любой доступ, который может быть ограничен, должен проверяться на достаточность прав доступа и не иметь обходных путей)
    • открытый дизайн (механизмы безопасности должны полагаться не на незнание их злоумышленником, а на данные типа ключей и паролей, которые проще защищать и менять)
    • разделение привилегий (в идеале доступ к важным объектам должен зависеть от более чем одного условия, так чтобы взлом одной системы защиты не приводил к полному доступу; напр., многофакторная аутентификация с требованием и пароля, и аппаратного токена сильнее однофакторной)
    • минимальные привилегии (процессы должны работать с минимальными привилегиями, необходимыми для выполнения ими своих функций)
    • наименьший общий механизм (дизайн должен минимизировать механизмы, общие для нескольких пользователей и следовательно зависящие от всех этих пользователей, например, каталоги для временных файлов)
    • психологическая приемлемость (интерфейс для человека должен быть спроектирован с учетом удобства использования - может быть полезным проектирование для «наименьшего удивления»)
    • ограничение периметра атаки (периметр атаки - множество разных точек, в которых злоумышленник может попытаться ввести или извлечь данные - должен быть ограничен)
    • проверка входных данных с помощью списков на допуск (входы обычно должны проверяться на корректность до их принятия; эта проверка должна использовать списки на допуск, содержащие только заведомо хорошие значения, а не списки на запрет, пытающиеся перечислить заведомо плохие значения).
    «Основной разработчик» в проекте - это любой, кто знаком с базой кода проекта, без затруднений может вносить в него изменения и признан таковым большинством других участников проекта. Основной разработчик, как правило, неоднократно вносит вклад в течение последнего года (через код, документацию или ответы на вопросы). Разработчики обычно считаются основными разработчиками, если это они начали проект (и не покинули проект более трех лет назад), имеют возможность получать информацию по закрытому каналу для отчетов об уязвимостях (если он есть), могут принимать коммиты от имени проекта или делать финальные выпуски программного обеспечения проекта. Если есть только один разработчик, этот человек является основным разработчиком. Есть много книг и курсов, помогающих понять, как разрабатывать более безопасное ПО, с обсуждением вопросов проектирования. Например, Secure Software Development Fundamentals - это бесплатный набор из трех курсов, объясняющих, как разрабатывать более безопасное ПО (бесплатный для обучения; за отдельную плату вы можете получить сертификат для подтверждения, что вы освоили материал).

    Maintainer self-attestation, 2026-10-27: the primary maintainer understands secure-design principles and applies them in the verifier. Examples include fail-closed verification, least privilege through read-only CI tokens, complete input checks against a hash-linked record, and external timestamp trust anchors. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/docs/design/simple_run.md


    Достаточно для значка!

    По крайней мере, один из основных разработчиков проекта ОБЯЗАН знать об общих видах ошибок, которые приводят к уязвимостям в этом виде программного обеспечения, а также по крайней мере одному методу противодействия или смягчения каждого из них. [know_common_errors]
    Примеры (в зависимости от типа ПО) включают внедрение SQL-кода (injection), внедрение на уровне ОС, классическое переполнение буфера, межсайтовый скриптинг, отсутствие проверки подлинности и отсутствие авторизации. Обычно используемые списки уязвимостей можно найти в CWE/SANS top 25 или OWASP Top 10. Есть много книг и обучающих курсов, помогающих понять, как разрабатывается безопасное программное обеспечение, и обсуждающих типичные ошибки в реализации, ведущие к уязвимостям. К примеру, Secure Software Development Fundamentals - это набор из трех курсов, объясняющих, как сделать разрабатываемое ПО более безопасным (бесплатный для прослушивания; за дополнительную плату вы можете получить справку о том, что прошли его).

    Maintainer self-attestation, 2026-10-27: the primary maintainer understands common errors relevant to this software, including unsafe deserialization, path traversal, dependency tampering, and false verification results. Relevant mitigations include weights-only loading or signature verification before unpickling, path containment, locked and pinned dependencies, and tampering tests that must fail. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/BestPracticesChecklist.md#secure-development-knowledge


  • Основы правильного использования криптографии

    Обратите внимание, что некоторое ПО не нуждается в использовании криптографических механизмов.

    Достаточно для значка!

    Программное обеспечение, созданное проектом, ОБЯЗАНО использовать по умолчанию только публикуемые криптографические протоколы и алгоритмы, которые анализируются экспертами (если используются криптографические протоколы и алгоритмы). [crypto_published]
    Эти криптографические критерии не всегда применяются, поскольку некоторые программы не нуждаются в прямом использовании криптографических возможностей.

    The project uses published algorithms and protocols: SHA-256, Ed25519 signatures, RFC 3161 timestamps, and Sigstore. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/simple/ovl.py https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/simple/stamp.py https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/src/signing.py


    Достаточно для значка!

    Если программное обеспечение, создаваемое проектом, является приложением или библиотекой, и его основной целью является не внедрение криптографии, тогда для реализации криптографических функций СЛЕДУЕТ обращаться к программному обеспечению, специально предназначенному для этого; НЕ СЛЕДУЕТ повторно реализовывать свои собственные функции. [crypto_call]

    Cryptographic operations use Python hashlib, PyNaCl/libsodium, OpenSSL, and Sigstore. The timestamp code encodes requests but delegates cryptographic verification to OpenSSL. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/src/signing.py https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/simple/stamp.py


    Достаточно для значка!

    Вся функциональность программного обеспечения, создаваемого проектом, которая зависит от криптографии, ОБЯЗАНА быть реализована с использованием свободного ПО. [crypto_floss]
    См. Требования к открытым стандартам для программного обеспечения в рамках Open Source Initiative (на англ.).

    Cryptographic functionality uses FLOSS implementations: Python hashlib, PyNaCl/libsodium, OpenSSL, and Sigstore. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/pyproject.toml https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/simple/stamp.py https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/.github/workflows/release-models.yml


    Достаточно для значка!

    Механизмы безопасности в программном обеспечении, создаваемом проектом, ОБЯЗАНЫ использовать стандартные длины криптографических ключей, которые, по крайней мере, соответствуют минимальным требованиям NIST до 2030 года (как указано в 2012 году). Проект ОБЯЗАН предоставлять возможность настройки ПО таким образом, чтобы уменьшенные длины ключей были полностью отключены. [crypto_keylength]
    Эти минимальные длины в битах перечислены далее: симметричный ключ - 112, модуль факторизации - 2048, дискретный логарифмический ключ - 224, дискретная логарифмическая группа - 2048, эллиптическая кривая - 224 и хеш - 224 (хеширование пароля не покрывается этой длиной, больше информации о хешировании пароля можно найти в описании критерия crypto_password_storage). См. http://www.keylength.com для сравнения рекомендаций по длинам криптографических ключей от различных организаций. Программное обеспечение МОЖЕТ допускать меньшие длины ключей в некоторых конфигурациях (в идеале не должно, поскольку это позволяет атаки через понижение длины ключа, но иногда требуется более короткая длина ключа для обеспечения взаимодействия с другими системами).

    Project artifact commitments use SHA-256, and artifact signatures use Ed25519. These mechanisms have no weaker configurable key-size option. Upstream MD5/SHA-1 metadata checks are separate compatibility checks, not the project's primary artifact commitments. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/src/signing.py https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/simple/ovl.py


    Достаточно для значка!

    Механизмы безопасности по умолчанию в программном обеспечении, создаваемом проектом, НЕДОПУСТИМО делать зависимыми от взломанных криптографических алгоритмов (например, MD4, MD5, single DES, RC4, Dual_EC_DRBG) или использовать режимы шифрования, которые не подходят для контекста, если только они не требуются для интероперабельности протокола (поддерживающего самую новую версию стандарта на этот протокол, широко распространенного в сетевой экосистеме, причем эта экосистема требует использования данного алгоритма или режима, не предлагая более безопасных альтернатив). В документации НЕОБХОДИМО описать все связанные с этим риски безопасности и все известные способы смягчения рисков, если данные алгоритмы или режимы действительно нужны для совместимости с другими реализациями этого протокола. [crypto_working]
    Режим ECB почти никогда не подходит, потому что внутри зашифрованного ECB текста обнаруживаются идентичные блоки, как можно видеть на примере «пингвина ECB», а режим CTR часто неприемлем, поскольку не выполняет аутентификацию и приводит к дубликатам, контекста, если состояние ввода повторяется. Во многих случаях лучше всего выбирать режим алгоритма с блочным шифром, предназначенный для сочетания секретности и аутентификации, например, Galois / Counter Mode (GCM) и EAX. Проекты МОГУТ разрешать пользователям включать сломанные механизмы, где это необходимо для совместимости, но в таких случаях пользователи знают, что они это делают.

    The project's primary integrity mechanisms use SHA-256 and Ed25519. MD5/SHA-1 are used for compatibility checks against upstream Wikimedia metadata and Git object identifiers, alongside project SHA-256 commitments. This limited use is documented in the checklist. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/BestPracticesChecklist.md#cryptography-mark-na-if-project-does-not-handle-cryptography https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/src/ovl_pipeline/preparation.py


    Достаточно для значка!

    Механизмы безопасности по умолчанию в программном обеспечении, создаваемом проектом, НЕ СЛЕДУЕТ делать зависимыми от криптографических алгоритмов или режимов с известными серьезными слабостями (например, криптографический алгоритм хеширования SHA-1 или режим CBC в SSH). [crypto_weaknesses]
    Проблемы, связанные с режимом CBC в SSH, обсуждаются в описании уязвимости CERT: SSH CBC.

    The project's primary cryptographic integrity mechanisms use SHA-256 and Ed25519. MD5/SHA-1 remain in limited upstream-checksum and Git compatibility roles, rather than as the primary project artifact commitments. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/BestPracticesChecklist.md#cryptography-mark-na-if-project-does-not-handle-cryptography https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/src/ovl_pipeline/preparation.py


    Достаточно для значка!

    В механизмах безопасности в программном обеспечении, создаваемом проектом, СЛЕДУЕТ реализовать совершенную прямую секретность для протоколов соглашений о ключах, чтобы ключ сеанса, произведенный из набора долгосрочных ключей, не мог быть скомпрометирован, если один из долгосрочных ключей скомпрометирован в будущем. [crypto_pfs]

    The project's artifact mechanisms use hashes, digital signatures, and timestamps. They do not implement a session-key agreement protocol. HTTPS and SSH transports are delegated to external libraries and services. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/src/signing.py https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/simple/stamp.py


    Достаточно для значка!

    Если ПО, создаваемое проектом, требует хранить пароли для аутентификации внешних пользователей, НЕОБХОДИМО хранить пароли как итерированные хеши с солью для каждого пользователя с использованием алгоритма (итерированного) растяжения ключа (например, PBKDF2, Bcrypt или Scrypt). См. также: OWASP Password Storage Cheat Sheet (на англ.). [crypto_password_storage]
    Этот критерий применяется только тогда, когда программное обеспечение требует проверки внешних пользователей с использованием паролей (так называемая входящая аутентификация), таких как серверные веб-приложения. Он не применяется в тех случаях, когда программное обеспечение хранит пароли для аутентификации в других системах (исходящая аутентификация; например, программное обеспечение реализует клиент для какой-либо другой системы), поскольку по крайней мере части этого программного обеспечения должны часто обращаться к нехешированному паролю.

    The software does not store passwords to authenticate external users. Credentials used to access external services are outbound credentials, which this criterion excludes. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/BestPracticesChecklist.md#cryptography-mark-na-if-project-does-not-handle-cryptography


    Достаточно для значка!

    Механизмы безопасности в программном обеспечении, создаваемом проектом, ОБЯЗАНЫ генерировать все криптографические ключи и временные значения с использованием криптографически безопасного генератора случайных чисел; НЕДОПУСТИМО делать это с использованием генераторов, которые криптографически небезопасны. [crypto_random]
    Криптографически безопасный генератор случайных чисел может быть аппаратным генератором случайных чисел или криптографически безопасным генератором псевдослучайных чисел (CSPRNG), использующим такие алгоритмы как Hash_DRBG, HMAC_DRBG, CTR_DRBG, Yarrow или Fortuna. Примеры вызовов защищенных генераторов случайных чисел включают java.security.SecureRandom в Java и window.crypto.getRandomValues в JavaScript. Примеры вызовов небезопасных генераторов случайных чисел включают java.util.Random в Java и Math.random в JavaScript.

    Ed25519 key generation uses PyNaCl SigningKey.generate(). Timestamp nonces use Python secrets. Seeded generators are used for reproducible training, not cryptographic keys or nonces. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/src/signing.py https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/simple/stamp.py


  • Доставка, защищенная от атак посредника (MITM)


    Достаточно для значка!

    Проект ОБЯЗАН использовать механизм доставки, устойчивый против атак посредника (MITM). Приемлемо использование https или ssh + scp. [delivery_mitm]
    Еще более сильным механизмом является выпуск программного обеспечения в виде пакетов, подписанных цифровой подписью, поскольку это смягчает атаки на систему распространения, но это работает только в том случае, если пользователи могут быть уверены, что открытые ключи для подписей верны и если пользователи действительно проверяют подпись.

    Source and release files are distributed through HTTPS on GitHub and Hugging Face. The current independent checker pins the evidence revision and verifies the release anchor's DigiCert timestamp. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/simple/checker_pod.sh https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/simple/fetch.sh


    Достаточно для значка!

    НЕДОПУСТИМО получать криптографические контрольные суммы (например, sha1sum) по HTTP и использовать их без проверки криптографической подписи. [delivery_unsigned]
    Эти хеши могут быть изменены при передаче.

    Release files, manifests, and hashes are downloaded through HTTPS. The DigiCert timestamp endpoint uses HTTP, but its response is cryptographically verified with OpenSSL before the current independent checker reports PASS. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/simple/stamp.py https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/simple/checker_pod.sh


  • Исправление обнародованных уязвимостей


    Достаточно для значка!

    НЕДОПУСТИМО оставлять незакрытыми уязвимости со степенью серьезности средней или выше, опубликованные более 60 дней назад. [vulnerabilities_fixed_60_days]
    Уязвимость должна быть исправлена ​​и выпущена самим проектом (патчи могут быть разработаны в другом месте). Уязвимость считается опубликованной (для цели данного критерия) после того, как она имеет CVE с описанием, бесплатно доступным для общественности, (например, в National Vulnerability Database) или когда проект был проинформирован, и информация была опубликована для общественности (возможно, самим проектом). Уязвимость имеет среднюю и высокую степень серьезности, если ее базовая оценка по CVSS 2.0 равна 4 или выше. Примечание. Это означает, что пользователи могут оставаться уязвимыми для всех злоумышленников по всему миру на срок до 60 дней. Этот критерий часто намного легче выполнить, чем рекомендует Google в Rebooting responsible disclosure, поскольку Google рекомендует, чтобы 60-дневный период начинался, когда проект был уведомлен, даже если отчет не является общедоступным.

    Maintainer attestation, 2026-10-27: no medium-or-higher vulnerability has remained unpatched for more than 60 days after public disclosure. The Medium finding in the 2026-10-26 security review was fixed and deployed the same day. Earlier public verification defects were fixed in #204, #207, #210, and #218. The open reports #222 and #238 date from 2026-10-25 and 2026-10-26 and remain under active handling. https://github.com/AOSSIE-Org/OpenVerifiableLLM/tree/main/security-reviews https://github.com/AOSSIE-Org/OpenVerifiableLLM/issues/222 https://github.com/AOSSIE-Org/OpenVerifiableLLM/issues/238


    Достаточно для значка!

    Проектам СЛЕДУЕТ оперативно исправлять критические уязвимости после сообщения о них. [vulnerabilities_critical_fixed]

    The maintainer reports no confirmed outstanding critical security vulnerability as of 2026-10-27. Security reports are acknowledged and addressed promptly. The signer-trust report #200 was acknowledged within one day and fixed through #204 within six days. The Medium finding in the 2026-10-26 security review was fixed and deployed the same day. https://github.com/AOSSIE-Org/OpenVerifiableLLM/issues/200 https://github.com/AOSSIE-Org/OpenVerifiableLLM/pull/204 https://github.com/AOSSIE-Org/OpenVerifiableLLM/tree/main/security-reviews


  • Другие вопросы безопасности


    Достаточно для значка!

    НЕДОПУСТИМА утечка действующих частных учетных данных (например, рабочий пароль или закрытый ключ), предназначенных для ограничения общего доступа, из публичных репозиториев. [no_leaked_credentials]
    Проект МОЖЕТ пропускать «шаблонные» учетные данные для тестирования и несущественные базы данных, при условии что они не предназначены для ограничения общего доступа.

    Maintainer attestation, 2026-10-27: the credential scan covered 563 commits in the repository history. It checked private-key blocks and GitHub, Hugging Face, AWS, OpenAI, Slack, Google, and RunPod token formats and found no matches. The keys/ directory contains a public verification key. Private key files are excluded by .gitignore. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/.gitignore https://github.com/AOSSIE-Org/OpenVerifiableLLM/tree/main/keys


 Анализ 8/8 ●

  • Статический анализ кода


    Достаточно для значка!

    НЕОБХОДИМО применять по крайней мере, один инструмент анализа статического кода (помимо предупреждений компилятора и "безопасных" режимов языка) к любой предлагаемой основной версии создаваемого ПО до ее выпуска, если есть хотя бы один инструмент на свободном ПО, который реализует этот критерий на выбранном языке. [static_analysis]
    Средство анализа статического кода анализирует программный код (как исходный код, промежуточный код или исполняемый файл), не выполняя его с конкретными входами. Для целей этого критерия предупреждения компилятора и «безопасные» языковые режимы не считаются инструментами анализа статического кода (они обычно избегают глубокого анализа, поскольку скорость имеет жизненно важное значение). Примеры таких статических инструментов анализа кода включают cppcheck (C, C++), статический анализатор Clang (C, C++), SpotBugs (Java), FindBugs (Java; включая FindSecurityBugs), PMD (Java), Brakeman (Ruby on Rails), lintr (R), goodpractice (R), Анализатор качества Coverity, SonarQube, Codacy и статический анализатор кода HP Enterprise Fortify. Более крупные списки инструментов можно найти в таких местах, как Wikipedia list of tools for static code analysis, OWASP information on static code analysis, NIST list of source code security analyzers и Wheeler's list of static analysis tools. Если для используемого языка(ов) реализации нет доступных инструментов статического анализа на свободном ПО, выберите «неприменимо» (N/A).

    As of 2026-10-27, CodeQL uses security-extended Python queries on pushes to main, pull requests targeting main, and a daily schedule. CI also runs Ruff on active code. The maintainer's current release process requires analysis before each proposed major production release. Both checks passed on main commit 874f0e728a6002b0daac6cddb0b9efa839a89faa. These automated checks were added on 2026-10-26 and were not present in the source tagged v1.0.0. That release commit was subsequently covered by a published security review. This answer describes the current release process. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/.github/workflows/codeql.yml https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/.github/workflows/ci.yml https://github.com/AOSSIE-Org/OpenVerifiableLLM/tree/main/security-reviews


    Достаточно для значка!

    ЖЕЛАТЕЛЬНО включать по крайней мере в один из инструментов статического анализа, используемых для критерия static_analysis, правила или подходы для поиска распространенных уязвимостей в анализируемом языке или среде. [static_analysis_common_vulnerabilities]
    Инструменты статического анализа, специально предназначенные для поиска распространенных уязвимостей, с большей вероятностью найдут их. Тем не менее, использование любых статических инструментов обычно помогает найти какие-то проблемы, поэтому мы предлагаем, но не требуем этого для получения базового значка.

    CodeQL analyzes Python using its security-extended query suite. The analysis passed on main commit 874f0e728a6002b0daac6cddb0b9efa839a89faa. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/.github/workflows/codeql.yml https://github.com/AOSSIE-Org/OpenVerifiableLLM/actions/runs/40418247310


    Достаточно для значка!

    Все уязвимости со средней и высокой степенью серьезности, обнаруженные при статическом анализе кода, НЕОБХОДИМО своевременно исправлять после их подтверждения. [static_analysis_fixed]
    Уязвимость имеет среднюю и высокую степень серьезности, если ее оценка по CVSS 2.0 - 4 или выше.

    Confirmed static-analysis findings are triaged and addressed. The CodeQL tar-extraction finding was fixed in PR #244 with regression tests for a malicious symlink archive and an ordinary archive. The maintainer reports that alerts #33 and #35 were dismissed with documented reasons and that no CodeQL alerts remained open on 2026-10-27. Alert #33 was classified as a false positive. Alert #35 concerns a preserved evidence script that is not run as product code. https://github.com/AOSSIE-Org/OpenVerifiableLLM/pull/244 https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/tests/test_dataset_archive.py https://github.com/AOSSIE-Org/OpenVerifiableLLM/security/code-scanning


    Достаточно для значка!

    ЖЕЛАТЕЛЬНО выполнять анализ статического исходного кода при каждом коммите или по крайней мере ежедневно. [static_analysis_often]

    CodeQL is configured for pushes to main, pull requests targeting main, and a daily schedule. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/.github/workflows/codeql.yml


  • Динамический анализ кода


    Едва достаточно для значка.

    ЖЕЛАТЕЛЬНО применять по крайней мере один инструмент динамического анализа к любой предлагаемой основной (major) версии программного обеспечения перед ее выпуском . [dynamic_analysis]
    Инструмент динамического анализа проверяет программное обеспечение, выполняя его с конкретными входными данными. Например, проект МОЖЕТ использовать инструмент фаззинг-тестирования (например, American Fuzzy Lop) или сканер веб-приложений (например, OWASP ZAP или w3af). В некоторых случаях проект OSS-Fuzz может быть готов применить фаззинг-тестирование к вашему проекту. Для целей этого критерия инструмент динамического анализа должен каким-то образом варьировать исходные данные, чтобы искать проблемы разного рода или быть автоматическим набором тестов с покрытием веток исполнения не менее 80%. Страница Википедии о динамическом анализе и cтраница OWASP о фаззинг-тестировании указывают некоторые инструменты динамического анализа. Использование инструмента/ов анализа МОЖЕТ, но не обязано быть сосредоточено на поиске уязвимостей в безопасности.

    Current CI runs fixed regression and tampering cases. The inspected workflow does not establish a qualifying input-generation/fuzzing tool or at least 80% branch coverage. Its coverage command measures statements, without branch measurement. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/.github/workflows/ci.yml


    Достаточно для значка!

    ЖЕЛАТЕЛЬНО регулярно использовать по меньшей мере один динамический инструмент (например, fuzzer или сканер веб-приложения) в сочетании с механизмом для обнаружения проблем безопасности памяти, таких как перезапись буфера, если программное обеспечение, создаваемое проектом, включает части, написанные на небезопасном языке (например, C или C++). Если проект не создает программное обеспечение, написанное на небезопасном языке, выберите «неприменимо» (N/A). [dynamic_analysis_unsafe]
    Примерами механизмов обнаружения проблем безопасности памяти являются Address Sanitizer (ASAN) (доступен в GCC и LLVM), Memory Sanitizer и valgrind. Другие потенциально используемые инструменты включают Thread Sanitizer и Undefined Behavior Sanitizer. Достаточно широкое использование утверждений (assertions) тоже может быть приемлемо.

    The project-owned software is Python with shell scripts. The inspected repository contains no project-owned C/C++ or other memory-unsafe implementation. Native code in third-party dependencies is not project-produced source. https://github.com/AOSSIE-Org/OpenVerifiableLLM


    Достаточно для значка!

    ЖЕЛАТЕЛЬНО включать в ПО, создаваемое проектом, достаточно много утверждений (assertions) времени выполнения, проверяемых при динамическом анализе. Во многих случаях эти утверждения не должны попадать в сборки под эксплуатацию (production). [dynamic_analysis_enable_assertions]
    Этот критерий не предполагает включения утверждений на этапе эксплуатации; решение об этом полностью лежит на проекте и его пользователях. Вместо этого критерий направлен на улучшение обнаружения ошибок во время динамического анализа перед развертыванием. Использование утверждений при эксплуатации полностью отличается от такового во время динамического анализа (например, при тестировании). В некоторых случаях включать утверждения при эксплуатации крайне неразумно (особенно в компонентах с высокой степенью целостности). Существует множество аргументов против включения утверждений в выпускаемых сборках: например, библиотеки не должны вызывать сбой при вызове, присутствие утверждений может привести к отклонению магазинами приложений и/или активация их при рабочем использовании может привести к раскрытию частных данных, таких как закрытые ключи. Помните, что во многих дистрибутивах Linux NDEBUG не определен, поэтому C/C++assert() в таких рабочих средах по умолчанию будет включен. Может быть важно использовать другой механизм утверждений или определить NDEBUG для эксплуатации в этих средах.

    CI runs pytest/unittest tests with assertions enabled and does not use Python optimization mode. The tests include assert, assertEqual, and assertRaises checks. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/.github/workflows/ci.yml https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/tests/simple/test_ovl.py


    Достаточно для значка!

    Проект ОБЯЗАН своевременно исправлять все уязвимости средней и выше степени серьезности, обнаруженные при динамическом анализе кода, после их подтверждения. [dynamic_analysis_fixed]
    Если вы не используете динамический анализ кода и, следовательно, не обнаружили уязвимостей таким способом, выберите «неприменимо» (N/A). Степень серьезности уязвимости считается средней или выше, если уязвимость имеет среднюю или выше базовую оценку по Common Vulnerability Scoring System (CVSS). В версиях CVSS с 2.0 по 3.1 это соответствует оценке 4.0 и выше. Проекты могут использовать оценку CVSS опубликованную в любой широко используемой базе данных по уязвимостям (такой как National Vulnerability Database) используя самую новую версию CVSS доступную в этой базе данных. Вместо этого проекты могут сами вычислять серьезность используя последнюю версию CVSS на момент раскрытия уязвимости, если вводные для вычисления раскрываются вместе с публикацией уязвимости.

    The maintainer confirms that the project does not currently run a qualifying dynamic analysis tool. CI runs fixed regression and tampering tests. These tests are not claimed to satisfy the dynamic_analysis criterion. There are therefore no findings from a qualifying dynamic analysis tool to assess under this criterion. https://github.com/AOSSIE-Org/OpenVerifiableLLM/blob/main/.github/workflows/ci.yml



Вы можете использовать инструменты и системы ИИ для предложения изменений через простой URL, например https://www.bestpractices.dev/ru/projects/15952/choose/edit?osps_ac_01_01_status=Met&osps_ac_01_01_justification=GitHub+enforced. Смотрите нашу систему автоматизированных предложений о том, как это сделать. Эти данные доступны по лицензии Community Data License Agreement – Permissive, Version 2.0 (CDLA-Permissive-2.0). Это означает, что получатель данных может распространять данные с изменениями или без них, при условии, что получатель данных предоставляет текст данного соглашения вместе с распространяемыми данными. Пожалуйста, укажите в качестве источника Rajat Roy и участников OpenSSF Best Practices badge.

Владелец анкеты на значок проекта: Rajat Roy.
2026-10-26 12:35:52 UTC, последнее изменение сделано 2026-10-27 02:04:47 UTC.