「データレイク」とは
さまざまな形式のデータを、加工せずそのままの形で大量にためておく保存場所。
科目Aの過去問での出方
IPA の公開問題・過去問のうち 1問 の問題文・選択肢・解説に出てきます。よく出る論点:データウェアハウス・ビッグデータ(1問)。
- サンプル問題(2022年12月公開) 問23・データウェアハウス・ビッグデータ覚えること:データレイク=あらゆるデータを、加工せずそのままの形でためておく場所。使い方は後から決める。
新シラバスで加わった分野(AI・データ・UXほか)の用語
- 非構造化データ文章・画像・音声・動画のように、決まった形式を持たないデータ。
- 時系列データ同じ対象を、時間の流れに沿って記録したデータ。例:毎日の気温、月ごと…
- クロスセクションデータある1時点で、複数の対象について集めたデータ。例:ある年の都道府県別…
- Webクローリングプログラム(クローラ)がリンクをたどってWebページを自動で集めて回…
- スクレイピングWebページなどから、必要な情報だけをプログラムで抜き出すこと。
- データのサイロ化データが部署やシステムごとにばらばらに管理され、組織全体で共有・活用…
- 名寄せ複数のデータに分かれている同じ人や同じものの情報を、1つにまとめるこ…
- 外れ値他のデータから大きく外れた値。入力ミスのこともあれば、重要な異常のこ…
- 欠損値データの中で、値が抜けている(記録されていない)部分。分析の前に扱い…
- 標準化(データの前処理)データを、平均0・標準偏差1になるように変換すること。単位や大きさの…