Methodology / versioned

再現できなければ、比較しない。

入力、gold、grader、rights、version、限界を分け、外部製品の優劣とasset readinessを混同しない。

固定するもの

  1. 合成日本語receipt 20件とschema
  2. field単位gold JSON
  3. deterministic graderとcontrolled error
  4. 各artifactのSHA-256
  5. 再実行日、製品version、費用時点(外部比較承認後)

権利とprivacy

20
local合成由来
0
個人data case
0
実在mark case

判定境界

区分扱い
事実dataset、gold、grader実測、公式page・調査が直接示す内容
推論検索意図、競合gap、信用代替。traffic実績へ昇格しない
仮説最初の100利用者funnel。公開後に反証する

公開前の限界