エビデンスの欠如
注:この文書は英語の原文からの自動翻訳です。
DecAIHub のプロジェクトカードには、unknown、none、positioning only のような値が入るフィールドがあります。このページでは、そうした値がプロジェクトに技術がないことを 意味しない 理由 — そして技術があることを 意味しない 理由 — を説明します。
要約: DecAIHub が記録するのは、検証可能なエビデンス の有無であり、技術そのものの有無ではありません。エビデンスがなければ、それは未解決の問いであり、判決ではありません。
基本原則
DecAIHub はエビデンスに基づく評価の原則で動きます:結論は 検証可能なアーティファクト(Tier-1、および程度の差はあれ Tier-2)に のみ 基づきます。アーティファクトが見つからない場合、結論は次のように読みます:
Tier-1 の確認が見つからない。
これは次と 同じではありません:
その技術は存在しない。
プロジェクトは次のような場合があり得ます:
- 動く製品はあるが、コードやドキュメントを公開していない;
- アーティファクトがまだ出ていない初期段階にある;
- クローズドな開発モデルを採用している;
- 検証時には見つからなかったエビデンスがある。
いずれの場合も、DecAIHub は該当フラグに 0 を付与し、「1 にするには何を提示または検証すべきか」を記録します。新しいアーティファクトが出現すれば、カードは更新されます。
ステータス値の読み方
unknown
意味:いずれのソース(Tier-1、Tier-2、Tier-3)にも、この側面についての情報は 見つかっていない。
- 否定ではありません:何かが存在しないとは言っていません。
- 肯定でもありません:プロジェクトの穴埋めはしません。
- 記録です:「検証日時点で、検証可能なデータは見つからなかった」。
none
意味:この側面では 何も検出されていない。文脈上、特定の答えが想定されるときに使われます(例:「AI component: none」— AI コンポーネントは特定されていない)。
unknown と同様、エビデンスの読み取りモード です。違いは文脈的で、none は特定の値が期待されるフィールドでよりよく使われます。
positioning only
意味:プロジェクトのマーケティングやポジショニングでは AI に 言及 があるが、動作する AI コンポーネントの Tier-1 エビデンスは見つかっていない。
- 名前、説明、カテゴリで「AI」という語を使っている可能性があります。
- 製品レベルで AI を裏付けるコード、指標、デモ、技術説明は見つかっていません。
- これは判決でも告発でもありません。主張はあるが、エビデンスはまだ、という記録です。
DecAIHub がプロジェクトの穴埋めをしない理由
保守的であることは意図的な選択です。理由は次のとおりです。
- AI-washing への耐性。 主張だけを受け入れたら、どのプロジェクトも主張だけで高得点を取れてしまいます。
- 読者の保護。 読者は、何が裏付けられ何がそうでないかを見て、自分で判断できるべきです。
- 更新可能性。 カードは特定の日時点の状態を記録し、Tier-1 アーティファクトが現れれば評価は見直されます。
DecAIHub のスナップショットにあるルール:
データが不十分または不確かなときは 0 を付与する。
つまり、データがないときに低いスコアを記録する方が、未検証の主張で水増しするよりよい、ということです。
カードに unknown または none があるときにすること
- 検証日(
Last verified)を確認する。カードは古く、その後に新しいデータが出ている可能性があります。 - Evidence を見る。どのソースが使われ、何が欠けているかが示されます。
- リンク を確認する。ドキュメント、リポジトリ、監査があれば、独立して検証する。
- 欠如を否定と同一視しない。
unknownは「わからない」であり、「存在しない」ではありません。
混同しないでください
unknownは0/6ではありません。unknownは特定フィールドの値であり、DecAI Fit = 0 はai_score = 0(確認された AI コンポーネントなし)を意味します。positioning onlyは判決ではありません。 主張とエビデンスのギャップであり、将来埋まる可能性があります。- 保守的な評価は否定的な評価ではありません。 いま検証できる範囲の境界を記録しています。
No comments to display
No comments to display