Chuyển đến nội dung chính

第11課:総合チートシート

コース全体の総合表:SageMakerアルゴリズム、AWS AIサービス、 評価指標、重要な公式、試験でよくある罠。

📝 試験対策 — 第11課 第11課:総合チートシート

AWS認定機械学習 - 専門知識 試験対策

パート4:総合復習

xdev.asia

1. SageMaker組み込みアルゴリズム — マスターテーブル

アルゴリズムタイプ最適な用途入力
XGBoost教師あり(C/R)テーブルデータ、コンペティションCSV、LibSVM
Linear Learner教師あり(C/R)高次元、高速CSV、RecordIO
Random Cut Forest教師なし異常検知CSV、RecordIO
K-Means教師なし顧客セグメンテーションCSV、RecordIO
PCA次元削減特徴量圧縮CSV、RecordIO
Factorization Machines教師あり(C/R)疎データ、レコメンデーションRecordIOのみ
DeepAR+教師あり時系列予測JSON Lines
BlazingText教師あり/教師なしテキスト分類、word2vecテキストファイル
Object2Vec教師あり意味的類似性JSON Lines
Image Classification教師あり画像ラベルRecordIO、生画像
Object Detection教師ありバウンディングボックスRecordIO、JSON
Semantic Segmentation教師ありピクセルレベル分類画像 + マスク
LDA教師なしトピックモデリングCSV、RecordIO
NTM教師なしニューラルトピックモデリングCSV、RecordIO
IP Insights教師なしIPアドレス異常CSV

2. AWS AIサービス — ノーコードML

サービス目的出力
Amazon Rekognition画像/動画分析ラベル、顔、テキスト、モデレーション
Amazon Textract文書抽出テキスト、フォーム、テーブル
Amazon ComprehendNLP、テキスト分析エンティティ、感情、トピック
Amazon Translate機械翻訳翻訳テキスト
Amazon Transcribe音声テキスト変換文字起こし、字幕
Amazon Pollyテキスト音声変換音声
Amazon Lex会話AI(チャットボット)インテント、スロット
Amazon Kendraインテリジェント検索回答、文書
Amazon Personalizeレコメンデーションアイテムランキング、ユーザーレコメンデーション
Amazon Forecast時系列予測予測 + 信頼区間
Amazon Lookout for Vision視覚的異常(製造業)合格/不合格、異常マップ
Amazon Lookout for Equipment設備異常(IoT)異常スコア

3. 評価指標クイックリファレンス

指標式使用場面
Accuracy(TP+TN)/(TP+TN+FP+FN)均衡クラス
PrecisionTP/(TP+FP)FPのコストが高い(スパムフィルター)
Recall(感度)TP/(TP+FN)FNのコストが高い(がん診断)
F1スコア2×(P×R)/(P+R)不均衡クラス
AUC-ROCTPR対FPR曲線下面積分類器の総合品質
RMSE√(Σ(yᵢ-ŷᵢ)²/n)回帰、外れ値をペナルティ
MAEΣ|yᵢ-ŷᵢ|/n回帰、外れ値にロバスト
MAPEΣ|yᵢ-ŷᵢ|/|yᵢ| × 100%予測、解釈しやすい%

4. 試験でよくある罠

罠試験での表現正解
不均衡データ + accuracy「モデルが99%のaccuracy」(不正検知)Precision/Recall/F1を使用、accuracyではない
FM入力フォーマットFactorization MachinesRecordIOのみ必須(CSVではない)
マネージド vs カスタム「最も迅速に実装」マネージドを優先(Personalize、Forecast)
過学習の修正訓練accuracyが高い、検証accuracyが低い正則化(L1/L2)またはデータ追加
SageMaker + インターネット「安全な環境、インターネットなし」VPC + ネットワーク分離 + VPCエンドポイント
Ground Truthラベリング「ラベリングコストの削減」GTの自動ラベリング(能動学習)
モデルのバイアス「デプロイ前にバイアスを特定」SageMaker Clarify
1つのエンドポイントに複数モデル「コスト削減、単一エンドポイント」マルチモデルエンドポイント(MME)

5. データ/ストレージクイックリファレンス

シナリオ最適な選択
大規模テーブル訓練データS3 + CSVまたはParquet;SageMaker用RecordIO
リアルタイムストリーミングデータ取り込みKinesis Data Streams → Firehose → S3
S3データ上のアドホックSQLクエリAmazon Athena
ETL変換 → Feature StoreAWS Glue(Spark ETL)→ SageMaker Feature Store
BI/ダッシュボードAmazon QuickSight
ML特徴量用データウェアハウスAmazon Redshift → ML(Redshift ML)

試験のヒント: 覚えておいてください:問題に「最速/最も簡単/ノーコード」とある場合 → AWSマネージドAIサービス。「カスタムモデル/柔軟性/自前のモデル」とある場合 → SageMaker。これが最も重要な判断基準です。