技術セミナー・研修・出版・書籍・通信教育・eラーニング・講師派遣の テックセミナー ジェーピー

機械学習のためのデータ前処理技術とノウハウ

機械学習のためのデータ前処理技術とノウハウ

～未整理の実用的なデータで学ぶ前処理のポイント / 思ったようなデータが入手できない、学習が上手くいかない時の秘策～
オンライン 開催
関連するセミナー・出版物
本セミナーは終了いたしました。
セミナーの再開催を依頼する 関連するセミナー・出版物を探す

アーカイブ配信で受講をご希望の場合、視聴期間は2024年12月20日〜2025年1月10日を予定しております。
アーカイブ配信のお申し込みは2024年12月20日まで承ります。

概要

本セミナーでは、機械学習の成果を左右する「データ前処理」について取り上げ、その基本から、高度な前処理、自然言語・画像・音声におけるすぐに使える前処理技術、うまく対処できない時のための最新技術の調べ方のコツなどについて、PCを用いた演習を含めて実践的な内容を解説いたします。

開催日

  • 2024年12月11日(水) 10時30分 ～ 16時30分

修得知識

  • Google Colaboratoryを用いたデータ分析
  • Pythonを用いたデータの前処理
  • 数値、テキスト、画像、音声データの前処理
  • 最近のAIでは常識になっている技術
    • ファインチューニング
    • データ拡張
    • 大規模言語モデルなど

プログラム

　本セミナーでは、データ分析や人工知能の開発において欠かせないデータの前処理技術についてレクチャーし、実演を交えて解説します。Google Colab環境用に準備されているサンプルコードを使って実データを対象に前処理し、機械学習してみることで、実践的な技術を習得していただくことがねらいです。実際、市販の教科書を片手にGoogle Colabにあらかじめインストール済みの各種ライブラリ (数値計算、機械学習、深層学習フレームワーク) を使って、どなたでも簡単にデータサイエンスやAIの初歩を体験することができます。しかし、そうした初歩的なサンプルコードの多くが理想的なデータ形式であったり、整理されたデータを対象としているため、実務において目の前にした未整理のデータの前処理に挫折してしまう方も多いと聞きます。このようにサンプルデータと実務で直面する生データとのギャップに戸惑うことは少なくありません。
　このセミナーでは、とにかく手っ取り早く手を動かしながら実用的なデータ前処理のコツをつかみたい人には最適です。困ったときにそのまま使える便利で実用的な前処理用サンプルコードを提供します。また、講師のこれまでの研究や実務の経験から、有用なデータの収集方法のコツ、思ったようなデータが入手できないときの秘策、学習が上手くいかないときのチューニングのノウハウなども伝授します。

  1. 準備
    1. Google Colabを使ったPython実行環境
    2. 便利なライブラリ群
      1. NumPy, pandas
      2. scikit-learn
      3. matplotlib
      4. Tensorflow, Keras
  2. 基本的な前処理テクニック
    1. 標準化、正規化、ビニング
    2. 外れ値と欠損値の扱い
      1. 四分位範囲による外れ値除去
      2. 外れ値に頑健な標準化法
      3. 単一代入法による欠損値の補完
      4. 多重代入法による欠損値の補完
    3. 特徴選択手法
      1. フィルタ法
        • カイ二乗検定
        • ANOVA
        • ピアソン積率相関係数
      2. ラッパ法
        • RFE
        • Boruta
      3. 正則化
        • リッジ回帰
        • LASSO回帰
        • 弾性回帰ネット
    4. 次元削減手法
      1. PCA
      2. NMF
      3. UMAP
      4. その他の次元削減
  3. 高度な前処理テクニック
    1. カテゴリカルデータの数値データへの変換
      1. one-hotエンコーディング
      2. ラベルエンコーディングとその他のエンコーディング法
      3. 特徴量ハッシング
      4. カテゴリ変数の分散表現 (エンティティ埋め込み)
    2. 不均衡データに対するリサンプリング法
      1. アンダーサンプリング
        • ENN
        • NearMiss
        • TomekLinks etc.
      2. オーバーサンプリング
        • SMOTE
        • ADASYN
        • BorderlineSMOTE etc.
    3. 時系列データに対する前処理
      1. 窓付き統計値
      2. タイムゾーンの変換
      3. 時系列データの補完
  4. テキストデータの前処理テクニック
    1. テキスト抽出と分かち書き・形態素解析
    2. 単語分散表現とトピックモデリング
      1. Word2Vec
      2. fastText
      3. 潜在的ディリクレ配分法 (LDA)
      4. その他のトピック分布
    3. ニューラルネットワークを用いたテキスト分類
      1. 畳み込みニューラルネットワークによる分類
      2. BERTのファインチューニングによる分類
      3. テキストデータの拡張方法
    4. 大規模言語モデル
      1. 言語モデルのファインチューニング
      2. 言語モデルの軽量化
      3. 言語モデルの説明可能性
  5. まとめ
    1. 演習問題
    2. もっと詳しく学びたい方へ
    • 質疑応答
ページのトップヘ

講師

  • 松本 和幸 氏
    徳島大学 大学院 社会産業理工学研究部
    准教授
ページのトップヘ

主催

株式会社 技術情報協会
お支払い方法、キャンセルの可否は、必ずお申し込み前にご確認をお願いいたします。

お問い合わせ

本セミナーに関するお問い合わせは tech-seminar.jpのお問い合わせからお願いいたします。
(主催者への直接のお問い合わせはご遠慮くださいませ。)

受講料

1名様
: 50,000円 (税別) / 55,000円 (税込)
複数名
: 45,000円 (税別) / 49,500円 (税込)

複数名同時受講割引について

  • 2名様以上でお申込みの場合、1名あたり 45,000円(税別) / 49,500円(税込) で受講いただけます。
    • 1名様でお申し込みの場合 : 1名で 50,000円(税別) / 55,000円(税込)
    • 2名様でお申し込みの場合 : 2名で 90,000円(税別) / 99,000円(税込)
    • 3名様でお申し込みの場合 : 3名で 135,000円(税別) / 148,500円(税込)
  • 同一法人内による複数名同時申込みのみ適用いたします。
  • 受講券、請求書は、代表者にご郵送いたします。
  • 他の割引は併用できません。

アカデミック割引

  • 1名様あたり 30,000円(税別) / 33,000円(税込)

日本国内に所在しており、以下に該当する方は、アカデミック割引が適用いただけます。

  • 学校教育法にて規定された国、地方公共団体、および学校法人格を有する大学、大学院、短期大学、附属病院、高等専門学校および各種学校の教員、生徒
  • 病院などの医療機関・医療関連機関に勤務する医療従事者
  • 文部科学省、経済産業省が設置した独立行政法人に勤務する研究者。理化学研究所、産業技術総合研究所など
  • 公設試験研究機関。地方公共団体に置かれる試験所、研究センター、技術センターなどの機関で、試験研究および企業支援に関する業務に従事する方
  • 支払名義が企業の場合は対象外とさせていただきます。
  • 企業に属し、大学、公的機関に派遣または出向されている方は対象外とさせていただきます。

ライブ配信対応セミナー / アーカイブ配信対応セミナー

  • 「Zoom」を使ったライブ配信またはアーカイブ配信セミナーのいずれかをご選択いただけます。
  • お申し込み前に、 視聴環境 と テストミーティングへの参加手順 をご確認いただき、 テストミーティング にて動作確認をお願いいたします。
  • 開催日前に、接続先URL、ミーティングID​、パスワードを別途ご連絡いたします。
  • セミナー開催日時に、視聴サイトにログインしていただき、ご視聴ください。
  • タブレットやスマートフォンでも受講可能ですが、機能が制限される場合があります。
  • ご視聴は、お申込み者様ご自身での視聴のみに限らせていただきます。不特定多数でご覧いただくことはご遠慮下さい。
  • 講義の録音、録画などの行為や、権利者の許可なくテキスト資料、講演データの複製、転用、販売などの二次利用することを固く禁じます。

ライブ配信セミナーをご希望の場合

  • Zoomのグループにパスワードを設定しています。お申込者以外の参加を防ぐため、パスワードを外部に漏洩しないでください。
    万が一、部外者が侵入した場合は管理者側で部外者の退出あるいはセミナーを終了いたします。

アーカイブ配信セミナーをご希望の場合

  • 当日のセミナーを、後日にお手元のPCやスマホ・タブレッドなどからご視聴・学習することができます。
  • 配信開始となりましたら、改めてメールでご案内いたします。
  • 視聴サイトにログインしていただき、ご視聴いただきます。
  • 視聴期間は2024年12月20日〜2025年1月10日を予定しております。
    ご視聴いただけなかった場合でも期間延長いたしませんのでご注意ください。
本セミナーは終了いたしました。
セミナーの再開催を依頼する
ページのトップヘ

これから開催される関連セミナー

開始日時 会場 開催方法
2026/3/31 Pythonで学ぶデータ解析・機械学習を理解するための線形代数入門 オンライン
2026/4/2 対話型AIによる文書作成のためのプロンプトエンジニアリング オンライン
2026/4/10 データ駆動型の化学・材料関連研究の最新動向と小規模データの活かし方 オンライン
2026/4/13 Excel業務をPythonで置き換えるデータ解析の実践 オンライン
2026/4/13 対話型AIによる文書作成のためのプロンプトエンジニアリング オンライン
2026/4/13 医療機器ソフトウェア開発における設計プロセスと最新規格対応 オンライン
2026/4/14 医療機器ソフトウェア開発における設計プロセスと最新規格対応 オンライン
2026/4/15 Pythonと生成AI/AIエージェントによるデータ分析入門 オンライン
2026/4/15 医療機器開発におけるソフトウェア規格の要点/サイバーセキュリティのリスク分析による設計文書への反映方法 (2日間) オンライン
2026/4/15 医療機器開発におけるソフトウェア規格要点と要求仕様書作成演習 オンライン
2026/4/15 生成AI時代のPythonデータ分析 オンライン
2026/4/16 MI, 生成AIを活用した材料開発の高速化、効率化 オンライン
2026/4/16 第一原理計算とLightGBMを活用したマテリアルデータエンジニアリングとその活用事例 オンライン
2026/4/16 医療機器開発におけるサイバーセキュリティのリスク分析による設計文書への反映方法 オンライン
2026/4/16 生成AI時代のPythonデータ分析 オンライン
2026/4/17 因子ごとの最適条件を少ない実験回数で見つける統計的手法「実験計画法」 & 汎用的インフォマティクス「非線形実験計画法」 オンライン
2026/4/20 統計学入門から多変量解析へ オンライン
2026/4/21 統計学入門から多変量解析へ オンライン
2026/4/22 Excel業務をPythonで置き換えるデータ解析の実践 オンライン
2026/4/22 AI搭載システムの品質・安全保証技術と検証のポイント オンライン
ページのトップヘ

関連する出版物

発行年月
2024/10/31 少ないデータによるAI・機械学習の進め方と精度向上、説明可能なAIの開発
2023/6/30 生産プロセスにおけるIoT、ローカル5Gの活用
2022/12/31 機械学習・ディープラーニングによる "異常検知" 技術と活用事例集
2022/11/21 ソフトウエア業界20社 (CD-ROM版)
2022/11/21 ソフトウエア業界20社
2021/10/25 AIプロセッサー (CD-ROM版)
2021/10/25 AIプロセッサー
2021/7/30 マテリアルズインフォマティクスのためのデータ作成とその解析、応用事例
2021/6/30 人工知能を用いた五感・認知機能の可視化とメカニズム解明
2021/6/28 AI・MI・計算科学を活用した蓄電池研究開発動向
2021/3/15 QRコード決済
2021/3/15 QRコード決済 (CD-ROM版)
2020/8/11 化学・素材業界におけるデジタルトランスフォーメーションの最新調査レポート
2020/7/31 生体情報センシングと人の状態推定への応用
2020/4/30 生体情報計測による感情の可視化技術
2019/1/31 センサフュージョン技術の開発と応用事例
2018/5/31 “人工知能”の導入による生産性、効率性の向上、新製品開発への活用
2013/6/21 機械学習によるパターン識別と画像認識への応用
2013/4/15 暗号化技術 技術開発実態分析調査報告書 (CD-ROM版)
2013/4/15 暗号化技術 技術開発実態分析調査報告書
ページのトップヘ