B Claw Security Scanner
基于Moltbook社区的高度关注(4151点赞的帖子:供应链攻击风险),我们开发了这个技能安全扫描器。
基于Moltbook社区的高度关注(4151点赞的帖子:供应链攻击风险),我们开发了这个技能安全扫描器。
B
81/100
Общая оценка
- Безопасность 60%
- Качество 40%
- Тесты бонус
Как улучшить
- Скажите в description, КОГДА применять скилл («используй, когда…», примеры запросов): это главный сигнал для срабатывания.
- Добавьте evals/evals.json с 4–6 реальными запросами и ожидаемыми ответами: тогда полная проверка использует ваши кейсы, а не черновик модели.
- Добавьте spec.yaml с триггерами и утверждениями (skilltest init): это контракт поведения для CI.
Находки guard · 6
✓ Критических и высоких находок нет
Средние и низкие: 6
-
низкая Секреты в коде
secret-labelled-tokentest_security_scanner.py:27Токен / ключ рядом с меткой (формат неизвестен — проверьте, что это не живой секрет) (значение-заглушка)API_KEY = "sk_t…def"
заглушка -
низкая Секреты в коде
secret-password-literaltest_security_scanner.py:27Захардкоженный пароль / ключ (возможно, пример) (значение-заглушка)API_KEY = "sk_t…def"
заглушка -
низкая Секреты в коде
secret-aws-keytest_security_scanner.py:30AWS access key ID (значение-заглушка)AWS_ACCESS_KEY_ID = "AKIA…PLE"
заглушка -
низкая Секреты в коде
secret-password-literaltest_security_scanner.py:66Захардкоженный пароль / ключ (возможно, пример) (тестовый файл / пример; в кавычках — упоминание, а не команда)SECRET_KEY=supe…123
тестовый файлв кавычках -
низкая Секреты в коде
secret-labelled-tokentest_security_scanner.py:100Токен / ключ рядом с меткой (формат неизвестен — проверьте, что это не живой секрет) (значение-заглушка)API_KEY = "sk_t…def"
заглушка -
низкая Секреты в коде
secret-password-literaltest_security_scanner.py:100Захардкоженный пароль / ключ (возможно, пример) (значение-заглушка)API_KEY = "sk_t…def"
заглушка
Просканировано файлов: 6. Улики замаскированы. Пометки в серых чипах объясняют, почему серьёзность понижена.
Lint
- предупреждение
name-formatname должен быть в kebab-case (строчные буквы, цифры, дефисы) - предупреждение
description-no-whendescription не говорит, КОГДА применять скилл (нет "use when / используй когда")
Процессная зрелость 41/100
- 0Результат и критерий готовности. Не сказано, что считать результатом
- 0Входы и предусловия. Не сказано, что нужно иметь на входе
- 0Ошибки и развилки. Линейный процесс без обработки сбоев
- 0Отчётность по ходу. Скилл ничего не сообщает по ходу работы
- 20Когда включается. Не сказано, при каком запросе скилл включается
- 40Согласованность. Имя во frontmatter (Claw Security Scanner) не совпадает с папкой (claw-security-scanner)
- 60Инструменты и файлы. Используются инструменты (bash, python), но во frontmatter они не объявлены
- 100Шаги. Шагов: 116
- 100Стоимость исполнения. Тело инструкции 1456 токенов
- 100Повторный запуск. Изменяющих операций нет
Всё перечисленное измерено по тексту скилла, а не оценено моделью: цифры проверяемы. Вес параметра тем больше, чем чаще из-за него процесс встаёт.
Сигналы качества
- +5В description нет примеров фраз, по которым скилл должен срабатывать
- +4Описание не говорит, когда скилл НЕ применять (ложные срабатывания)
- +3Длина description 52: рекомендуется 120–800 символов
- +3Формат ответа не описан: модель каждый раз решает сама
- -221 эмодзи в инструкциях: шум для модели
- +1Лицензия не указана
- +2Инструкции на одном языке
- +4Структура: 57 заголовков
- +3Пошаговые инструкции: 116 пунктов
- +4Есть примеры (12 блоков кода)
База качества 70; замечания lint вычитаются, сигналы прибавляют до 100. Итог: 62.