Nexus Studioはどのようにしてこのサイトの数値を確認しているのですか?
このサイトに記載されているすべての数値は、実行したコマンドやリポジトリ内のテストから取得されたものか、あるいは推定値として明記されています。このページでは、主な数値、それぞれの算出元、検証方法、および記載された日付にその検証で何が出力されたかを一覧で示しています。また、それらの検証が何を証明していないかも記載しています。
執筆: Nexus Studio チーム、Verdict System LLC(2026年10月27日)
どの主張に検証があり、何が出力されましたか?
| 主張内容 | 算出元 | 実行する検証 | 2026年10月27日の結果 |
|---|---|---|---|
| 判定は14通りあり、そのうち7つは終了コード0で終了します | classification-module.js、合格判定の一覧、および exitCodeOf | node --test tests/unit/classification-parity-engines.test.js | 42件のテスト、42件合格 |
| 障害はバグとみなされる前に、固定された順序でまず環境に対してテストされます | 同じファイル内のテスト「detection order: the first matching family wins, on both engines」 | 同じコマンド | 42の一部 |
| Studioとエンジンはまったく同じ方法で判定(verdict)をグループ化します | verdict-groups.js とStudioの status.ts | node --test tests/unit/verdict-groups.test.js | テスト6件、合格6件 |
| 変更されたAPIレスポンスは、差分とともにAPI_DRIFTEDとして報告されます | api-schema.js、および手動で実行されるスキーマドリフトのページの例 | node --test tests/unit/api-schema.test.js | テスト10件、合格10件 |
| シェルに直接渡されるコマンドはなく、文字列補間によって構築されるコマンドもありません | ソースコードを読み取る no-shell.test.js | node --test tests/unit/no-shell.test.js | テスト3件、合格3件 |
| リリースの判定基準には6,057件のテストがあります:エンジン2,997件、Studio 3,060件 | npm run gate: エンジンのテスト、Studioの型チェック、Studioのテスト、および警告ゼロのLint | npm run gate | 失敗0件、スキップ9件(エンジン内7件、Studio内2件)、警告0件の静的解析(lint) |
| 駆動するAIツール、タイムアウト、Playwrightのバージョンなど、サイト上の製品に関する説明はコードと一致しています | website-facts.test.jsはStudioのソースを読み込み、website-commercial.test.jsは価格をplans.tsと照合します | node --test tests/unit/website-facts.test.js tests/unit/website-commercial.test.js | 35件のテスト、35件すべて成功 |
3つの課題ページの例は、書き起こす前に実際に実行されました: real bug or flaky、API schema drift、そしてtesting without a cloud grid。各ページの出力は、コマンドが出力した内容そのものであり、明記されている箇所のみ省略されています。
ページ上の日付はどこから取得されていますか?
ページのサイトマップ内の日付は、そのページに変更を加えた最後のコミットの日付であり、scripts/sitemap-lastmod.mjsによってgit log -1 --format=%csで読み取られます。ファイルが生成された日になることはありません。毎日変動する日付は検索エンジンに無視される要因となるためです。changelogには公開されたリリースと、それとは別にそれ以降の日付付きの変更履歴が記載されています。
これらのチェックでは何が分からないのですか?
- テストにパスすることは、コードが説明どおりに動作することを示しています。お客様がどのような成果を得られるかを示すものではありません。報告できるお客様の成果はなく、サイトにはお客様の声も掲載していません。
- Nexus Studioをクラウドグリッドとベンチマーク比較したことはないため、サイト上で速度の比較は行っていません。課題ページに記載されている所要時間は1台のノートPCで測定されたものです。
- ホームページ上の失敗しているテストは演出されたデモであり、ページ上にもその旨が記載されています。インフラページの節約額などの試算値は試算として明記され、その合計計算の整合性も確認されています。
- チェックの信頼性は、それが何をアサートしているかによって決まります。テストでカバーされていない動作は、チェックが赤く失敗することなく誤った状態になり得ます。
ここの数値が間違っていたらどうなりますか?
製品側が正しくページ側が間違っているため、ページを修正します。該当のページと数値を記載の上、support@nexusstudioqa.comまでご連絡ください。Trust pageにはセキュリティとプライバシーに関する表明が記載されており、Verify a download pageにはインストーラーの確認方法が掲載されています。