Python 模擬試験

Pythonデータ分析実践 模擬試験 第6回 問27・5章 データの評価(モデルの評価)

ネステッド交差検証

ハイパーパラメータの探索と、モデルの性能の評価を、同じ交差検証で行うと、評価が楽観的になる。この問題への対処として、最も適切なものを1つ選べ。

  1. A

    ハイパーパラメータの探索には、評価に使うテストデータを使い回すのがよい。

  2. B

    ネステッド交差検証(内側の交差検証でハイパーパラメータを選び、外側の交差検証で性能を評価する)や、最終評価用のテストデータを別に取っておく方法を使う。

  3. C

    ハイパーパラメータは、探索せず、常に既定値を使う。

  4. D

    交差検証は、評価の信頼性が低いので、使わない。

正解と解説を見る

正解:B

ハイパーパラメータの選択と最終評価は、データを分ける。ネステッド交差検証や、テストデータを最後まで取っておく方法で、楽観的な評価を避ける。

学習のポイント:GridSearchCV の結果の best_score_ は、楽観的になりうる。

この問題を演習で解く →

問題一覧へ

このサイトの問題は、各試験の公式に示された出題範囲に沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。一般社団法人Pythonエンジニア育成推進協会の公式サービスではありません。