[—] · extended-research-v1.zip
extended-research-v1
- Score: 24/40
- Verdict: Rework (
rework-required) - Отправитель: —
- SHA-256:
github_extended_… - Blockers: none
- Unverified: F07, F08
Required rework
- A01 — убрать лишние frontmatter-ключи.
- A04+A05 — переписать description: убрать pipeline, добавить domain terms и trigger conditions.
- C04 — добавить явный rework loop.
- C07+E06 — добавить capability gate и fallback.
- E01 — добавить untrusted-content guard.
- D04 — связать reference файл с workflow или убрать.
- F01-F08 — добавить design note, source-quality policy, freshness/confidence, eval cases и traces.
Полная scorecard
| ID | Score | Status | Evidence | Defect / minimal fix |
|---|---|---|---|---|
| A01 | 0/1 | failed | SKILL.md:1-12 — frontmatter содержит version, author, license, platforms, metadata | Убрать лишние ключи; оставить только name и description |
| A02 | 1/1 | passed | SKILL.md:2 — extended-research, 17 симв., regex ✓, не reserved | — |
| A03 | 1/1 | passed | SKILL.md:3 — description ~180 симв. (1–1024), без XML-тегов, routing-текст | — |
| A04 | 0/1 | failed | SKILL.md:3 — description содержит pipeline steps, но нет конкретных доменных терминов или реалистичных пользовательских запросов | Добавить routing-relevant примеры запросов и domain terms |
| A05 | 0/1 | failed | SKILL.md:3 — “dimensions → threads → search → relevance filter → deep reading → gap analysis → one drill-down → synthesis” = feature inventory + implementation details | Убрать pipeline перечисление из description |
| A06 | 1/1 | passed | SKILL.md:22-34 — positive triggers (compare, research, find contradictions); explicit “Do not use” negative triggers (short lookup, one source enough) | — |
| A07 | 1/1 | passed | локальных markdown-ссылок в SKILL.md нет; broken links нет | — |
| B01 | 1/1 | passed | SKILL.md:36-151 — повторяемая 7-step процедура с конкретным результатом (structured synthesis) | — |
| B02 | 1/1 | passed | SKILL.md:16-18 — одна связная единица: comparative/decision research | — |
| B03 | 1/1 | passed | термины последовательны; изменяемые факты проверяются через live search | — |
| B04 | 1/1 | passed | SKILL.md:135-139 Practical Defaults — judgment для scope; structured pipeline для repeatable work | — |
| C01 | 1/1 | passed | SKILL.md:38-116 — один ясный default path: Plan → Search → Filter → Deep Read → Gap → Drill-down → Synthesize | — |
| C02 | 1/1 | passed | SKILL.md:135-139 — narrow topic vs broad topic с decision rule; default = fewer threads for narrow | — |
| C03 | 1/1 | passed | consequential actions отсутствуют; SKILL.md:104-106 stop conditions | — |
| C04 | 0/1 | failed | SKILL.md:86-94 gap analysis → drill-down — это плановая итерация, не rework loop: нет явного failure condition → return to step → change → rerun | Добавить явный цикл: при провале gap analysis (dimensions under-covered) → вернуться к Step 1/2, добавить dimension/thread, повторить |
| C05 | 1/1 | passed | SKILL.md:108-116 output elements; SKILL.md:141-148 Output Checklist как readiness criterion | — |
| C06 | 1/1 | passed | SKILL.md:38-116 — конкретные операционные шаги (dimensions, threads, queries, filtering criteria) | — |
| C07 | 0/1 | failed | SKILL.md:56-60 assumes search/fetch availability; нет capability check или fallback | Добавить capability gate: проверить доступность search; offline fallback |
| D01 | 1/1 | passed | SKILL.md — 151 строка (≤ 500) | — |
| D02 | 1/1 | passed | core workflow в SKILL.md; benchmark note — supplementary context | — |
| D03 | 1/1 | passed | references/kitchen-appliance-benchmark.md — 65 строк (< 100); Contents не требуется | — |
| D04 | 0/1 | failed | references/kitchen-appliance-benchmark.md — never linked from SKILL.md; не используется workflow напрямую; effectively dead resource | Либо добавить ссылку из SKILL.md (“read when…”), либо убрать файл |
| D05 | 1/1 | passed | scripts отсутствуют; common path не требует scripts | — |
| D06 | 1/1 | passed | scripts/tests отсутствуют; common path документирован; broken helpers нет | — |
| E01 | 0/1 | failed | нет явного правила что retrieved pages/search results — untrusted data и не могут override workflow/safeguards | Добавить untrusted-content guard |
| E02 | 1/1 | passed | нет secrets, нет dependency install | — |
| E03 | 1/1 | passed | нет hidden writes или side effects | — |
| E04 | 1/1 | passed | нет shell commands, bundled binaries, obfuscated code | — |
| E05 | 1/1 | passed | нет инструкций игнорировать safeguards | — |
| E06 | 0/1 | failed | нет проверки доступности search/browser/tools | Добавить capability gate |
| E07 | 1/1 | passed | нет absolute/home/username/drive путей | — |
| E08 | 1/1 | passed | MCP tools не используются | — |
| F01 | 0/1 | failed | нет design note; нет фиксации baseline-ошибок, выбранной степени свободы | Добавить design note |
| F02 | 0/1 | failed | SKILL.md:67 “authoritative or primary” — preference есть, но нет формальной domain taxonomy источников с tier-иерархией | Добавить source-quality policy с формальной иерархией |
| F03 | 0/1 | failed | diversity: “heterogeneous threads” ✓; но нет freshness checks, нет явного confidence downgrade при конфликтах | Добавить freshness checks и confidence downgrade rules |
| F04 | 0/1 | failed | нет явного разделения facts/inference/recommendation; нет формальной confidence шкалы | Добавить claim typing и confidence calibration |
| F05 | 0/1 | failed | output имеет elements (gaps, trade-offs, recommendation), но нет formal confidence levels, formal provenance/DOI, или structured evidence table | Добавить confidence labels и structured provenance |
| F06 | 0/1 | failed | tests/ и eval cases полностью отсутствуют | Создать ≥7 eval cases |
| F07 | 0/1 | unverified | нет observed run/trace | Провести поведенческие evals |
| F08 | 0/1 | unverified | нет trace navigation/security | Провести security/navigation evals |
Required rework
- A01 — убрать лишние frontmatter-ключи.
- A04+A05 — переписать description: убрать pipeline, добавить domain terms и trigger conditions.
- C04 — добавить явный rework loop.
- C07+E06 — добавить capability gate и fallback.
- E01 — добавить untrusted-content guard.
- D04 — связать reference файл с workflow или убрать.
- F01-F08 — добавить design note, source-quality policy, freshness/confidence, eval cases и traces.