AWS Certified Machine Learning – Specialty 受験記

-

当時のスペック

AWS関連

  • 入社3年目で、AWS関連業務をやってました。

    • 触ったサービスとしてはCLI, Cloudformation, Organization, CloudWatchなどです。

  • Solution architect - professionalを持ってました

     

機械学習(Machine learning)関連

  • 業務で触ることはありません

  • 社内講座で基礎講座を受講しました

    • One-hot encodingなどの簡単な用語には「聞いたことある！」くらいになりました

  • 個人的にも触りたいと思っていますが、なかなか…

     

「AWS Certified Machine Learning – Specialty」について

  • 試験ガイドを参考にすると、４つの分野に分かれています

    • 機械学習の流れで分野が分かれている気がします
    • データ収集(分野１)　→　前処理＆分析(分野２)　→　モデル選び(分野３)と全般的なアーキテクチャ(分野４)

     

試験の内容

分野１：データエンジニアリング

1.1 機械学習のデータリポジトリの作成。
1.2 データ収集ソリューションの特定と実装。 
1.3 データ変換ソリューションの特定と実装。

  • 生データの収集、変換(加工)、保管についての内容です

  • 機械学習の知識よりは、AWSアーキテクチャのにおいが強いです

  • なので、関連サービスの特徴を覚えておくことが大事です

    • 例えば、Kinesis DatastreamとFirehoseの違い、どういう場合にとれか適合しているか

  • また、生データを収集　→　変換　→　保管の流れの設計例をしっておく必要があります。

 

分野２：探索的データ解析

2.1 モデリングのためのデータのサニタイズと準備。 
2.2 特徴エンジニアリングの実施。 
2.3 機械学習用データの分析と視覚化。

  • 保管されたデータを分析し、パターンをみつけることについての内容です

  • サニタイズ(データの欠損値処理、ノイズ除去)が出てくるので、機械学習の知識が必要になってきます

    • 手法の種類、特徴、処理方法

  • 保管(S3とか)から視覚化(QuickSightなど)までの設計例を覚えておく必要があります

 

分野 3: モデリング 

3.1 ビジネス上の課題を機械学習の課題として捉え直す。 
3.2 特定の機械学習の課題に対する適切なモデルの選択。 
3.3 機械学習モデルのトレーニング。 
3.4 ハイパーパラメータの最適化の実施。 
3.5 機械学習モデルの評価。

  • 分析したデータをもとにどの学習モデルを選ぶかパラメータを設定するかの内容が出てきます

    • Sagemakerを利用して学習するときの特徴などなど

     

分野 4: 機械学習の実装と運用 

4.1 パフォーマンス、可用性、拡張性、回復性、フォールトトレランスを備えた機械学習ソリュ ーションの構築。 
4.2 特定の課題に対応する適切な機械学習サービスおよび機能の推奨と実装。 
4.3 機械学習ソリューションへの基本的な AWS のセキュリティプラクティスの適用。 
4.4 機械学習ソリューションの展開と運用の実現。

  • Sagemakerを利用して学習するときの実装方法、運用アーキテクチャの内容になります

    • AWSアーキテクチャのにおいが強くなります

  • AWS マネージドサービス(ForecastやRekognition)を選ぶこともあるので、簡単にサービスの内容を知っておく必要があります

     

勉強方法

Udemy講座を受講

  • ほぼ何もわからない状態だったので、(サルでもわかるように)教えてくれる先生が必要でした

  • 講座は1万～2万のものが多いですが、結構な頻度でセールをします

    • 2000円～4000円あたりになります

  • 講座の購入基準

    • 星が3.5以上(できれば4以上)

    • 常に更新している＆管理されている

      • Last updatedを確認します

    • レビューを見る

      • できるだけ最新日付ののレビューがあるか、レビューの数はどれくらいかを確認します

  • 多くの講座が英語で提供ですが、字幕やスクリプトが提供されるので、グーグル先生の力を借りて勉強できます

  • 私は「AWS Certified Machine Learning Specialty 2020 - Hands On!」を購入しました

 

模擬試験を受験

Udemyの模擬試験

 

AWSの模擬試験

  • 4000円+税です

  • 過去に他のAWS資格に受かった場合はただで受けられるバウチャーがもらえます！

  • 安心の日本語です

  • 結果は各分野の正答率だけ。各問題の結果と解説はついていません

  • 模擬試験が本番より難しいという噂もありますので、低い点数が出てもガッカリしなくても大丈夫です

    • 私も結構悲惨な点数でしたｗ

 

その他

  • 勉強期間は2週間くらいです
  • 平日は家に戻ったら、講座を1時間程度見て、模擬試験を1個受講しました
  • 週末は少しだけ模擬試験を眺めました

 

さあ、受験へ

受験場所

  • webカメラで受験者を監視、英語のチャットで指示を受けるというテストセンターもあるようですが、私が受けたところは普通にPCで受験するようなところでした。(部屋はカメラで監視されていましたが)

     

試験について

  • 17０分、約80問です。

  • 紙に書いて簡単に計算しないといけない問題が、1，2問で出てきます

  • AWSサンプル問題では、機械学習の知識が必要な問題が5割？くらいでしたが、実際ではそこまで多くなかったイメージです。

  • 30分くらい残して全問題解いて、残りの時間は問題を見直してました

     

結果＆感想

  • ギリギリのギリギリ合格でした。
  • 自信あった「分野１：データエンジニアリング」が再学習の必要ありなのがちょっと意外でした。
  • 3年後にはもうちょっと高い点数で更新したいです！

Popular Posts

CloudWatch EventsはAmazon EventBridgeになるらしい

-
イメージ
まえおき 　最近久々にCloudWatch Events(以下、Events)の画面を開いたら、以下のようなメッセージが出ていた。 グーグル翻訳先生に翻訳をお願いすると CloudWatch Events is now Amazon EventBridge Amazon EventBridge (formerly CloudWatch Events) provides all functionality from CloudWatch Events and also launched new features such as Custom event buses, 3rd party event sources and Schema registry to better support our customers in the space of event-driven architecture and applications. CloudWatch EventsがAmazon EventBridgeになりました Amazon EventBridge（以前のCloudWatch Events）は、CloudWatch Eventsのすべての機能を提供し、カスタムイベントバス、サードパーティイベントソース、スキーマレジストリなどの新機能も起動して、イベント駆動型のアーキテクチャとアプリケーションの領域でお客様をより適切にサポートします。 らしい。Amazon EventBridge(以下、EventBridge)がEventsの代わりになるということだった。いつから出たんだろう…。最近、画面のUIが変わりましたのメッセージが常にほぼどのサービスでも同じ感じで出ていたから全然気つかなかった…。今までは、EventBridgeというEventsと似ているサービスがあるということは知っていたけど、Eventsの機能で十分だったので特に気にしてなかった。調べてみると、ちょうど1年前に発表されたサービスだった。( Amazon EventBridge – SaaS アプリケーション用のイベント駆動型での AWS の統合 )   Cloudwatch EventsとAmazon EventBridgeの違い 　全く同じサービスであるというと若...
続きを読む

PythonのDict型をDynamoDB形式のJsonに変換する

-
pythonでDynamoDB関連操作をするとき、難しい点の一つは一つは以下のようなDynamoDBの独特なJSON形式だと思います。 { "id": { "N": 12345 }, "name": { "S": "TanakaTaro" } } Python用のAWS SDKであるBoto3にはDynamoDB形式のJsonをPythonのDictに変換できる TypeSerializer と TypeDeserializer があります。 https://boto3.amazonaws.com/v1/documentation/api/latest/_modules/boto3/dynamodb/types.html TypeSerializer PythonのDictをDynamoDB形式のJsonに変換します。個人的には変換結果で最初の{"M": ...}はなくしてほしいですが… TypeDeserializer DynamoDB形式のJsonをPythonのDictに変換します。こちらも一気に変換はできず、各Keyごとに変換が必要です。 まとめ＆蛇足 TypeSerializerとTypeDeserializerはDynamoDBのデータをpythonで処理したいときや処理後にまたDynamoDBにアップロードしたいときに有効に利用できそうです。 ただ、そのまま利用するよりは、利用しやすくカスタム関数やクラスを作成したほうがよさそうです。 JavaScriptのSDKにもConverterというものがあるようです https://aws.amazon.com/jp/blogs/developer/announcing-the-amazon-dynamodb-document-client-in-the-aws-sdk-for-javascript/
続きを読む

CloudFormationテンプレート内のStep functionsのState machine定義をS3に置けるようになった

-
イメージ
まえおき 今週あったチーム先輩(Aさん)との会話 私　：CloudFormationテンプレートにStepfunctionsを書こうとするとyamlにベタ書きしかできないんですよ。 　　　これが私がCDKを押す理由の一つなんですよ。 Aさん：LambdaみたいにS３バケットに定義ファイルを置いてそのパスをyamlに書けばいいじゃん。 私　：あれ?私が調べたときはそれができなかったので、今あるテンプレートはすべてベタ書きにしているんですが…。 Aさん：うん?これでできないんだけ？(CloudFormationのドキュメントURLを共有) 私　：できるじゃん!? 　送られてきた CloudFormationドキュメント を見ると、 DefinitionS3Location というプロパティがあった。おかしいな…調べたときは本当になかったんだようなーと思いずつ更新履歴を見ると、2020年5月20日更新。私が調べたのは1月ごろだったから、その時はなかったということだ。うーん、What's Newはほぼ毎日見るけど、使っているサービスのドキュメント更新履歴も頻繁にチェックしないといけないのかな…。とりあえず、試してみることにした。   DefinitionS3Locationを試してみる Step Functionsのテンプレートを準備 　State Machineの定義はAWSドキュメントの Getting Started with Step Functions にあるコードから最後のstateを少し変えた簡単な以下のコードを利用する。 DefinitionSubstitutions も使ってみたかったので。 DefinitionSubstitutions はテンプレート内で同時に作成されるリソースをState Machine内で利用する場合に使う。例えば、Lambdaを作成して、それをState machineに入れるとか。(LambdaのARNが必要になる)   　jsonファイルで保存し、S3のバケットに保存する。 　これでStep Functions側の準備は終わり。   CloudFormationテンプレートを準備 　 CloudFormationの StepFunctions::StateMachi...
続きを読む