令和元年度 秋期 システムアーキテクト試験 午前Ⅱ 問12
テクノロジ/開発技術ある通信販売事業者は,人工知能技術を利用して人間のように受け答えする,Web のチャットをインタフェースとしたユーザサポートシステムを開発している。テスト工程では,次の方法でテストする手法を採用した。このような,人工知能に関するテスト手法を何というか。 〔テストの方法〕 ・判定者は,このシステムと人間の二者を相手に自然言語によるチャットを行う。このとき,判定者はどちらがこのシステムで,どちらが人間なのかは知らされていない。 ・判定者が一連のチャットを行った後に,チャットの相手のどちらがこのシステムで,どちらが人間かを判別できるかどうかを確認する。
出典:令和元年度 秋期 システムアーキテクト試験 午前Ⅱ 問12
- ア実験計画法
- イチューリングテスト
- ウファジング
- エロードテスト
正解:イ
解説
チューリングテストは,判定者が人間とコンピュータ(対話システム)の両方と自然言語で対話し,どちらが人間でどちらがコンピュータかを判別できるかどうかによって,そのコンピュータが人間のような知的な受け答えができるかを評価する,人工知能に関する古典的なテスト手法です。
選択肢ごとの解説
- ア誤り。実験計画法は,複数の要因が結果に与える影響を効率的に分析するための統計的な実験手法であり,AIの応答能力を判定する手法ではありません。
- イ正しい。判定者が人間とシステムを区別できるかどうかによって知的な応答を評価する手法は,チューリングテストです。
- ウ誤り。ファジングは,想定外の入力データを与えてソフトウェアの脆弱性や不具合を検出するテスト手法であり,対話による判別を行う手法ではありません。
- エ誤り。ロードテストは,システムに高い負荷を掛けて性能や耐久性を検証するテストであり,人間との判別を行う手法ではありません。