LLM入門

合計 2 件の記事があります。現在 1 ページ中の 1 ページ目です。

3.1 LLMのデータセットと前処理 | データクリーニングとトークナイゼーションの重要性

LLM（大規模言語モデル）のトレーニングに必要なデータセットと前処理をエンジニア向けに解説。データのノイズ除去、トークナイゼーション、正規化、データバランスの取り方について詳しく説明します。

2024-09-12

3.0 LLMのトレーニング方法 | データセット、前処理、ファインチューニングの解説

LLM（大規模言語モデル）のトレーニング方法をエンジニア向けに解説。データセットの前処理、トレーニングのステップ、ファインチューニングやトランスファーラーニングを活用した効率的なモデル構築の方法を詳述。

2024-09-11

カテゴリー

LLM入門（上）

LLM入門 X 数学

LLM入門（上）実践Python

タグ

LLM 15 LLM 13 自然言語処理 9 NLP 6 トランスフォーマー 6 AI 5 キー 5 トランスファーラーニング 5 線形代数 5 クエリ 4

検索履歴

大規模言語モデル 118 自動要約 116 マルコフ連鎖 112 パーソナライズドコンテンツ 104 LLM リアルタイム処理 103 NLP トランスフォーマー 100 Azure テキスト生成 99 マルコフモデル 99 自然言語処理翻訳 99 GPT-2 テキスト生成 97 エンジニア向け 97 ロス計算 97 LLM 要約 96 カスタマーサポート 95 データ前処理 95 自動翻訳 95 言語モデル 95 BERT 質問応答 93 トレーニング 93 GPT ファインチューニング 92 コード生成 92 セルフアテンション 92 ニュース記事生成 92 線形代数 92 教育AI 90 LLM テキスト生成 89 LLM 翻訳 88 BERT トランスファーラーニング 86 自然言語生成 86 FAQシステム 85

チーム

任弘毅

株式会社レシートローラーにて開発とサポートを担当。POSレジやShopifyアプリ開発の経験を活かし、業務のデジタル化を促進。

下田昌平

開発と設計を担当。1994年からプログラミングを始め、今もなお最新技術への探究心を持ち続けています。