LLM入門


合計 3 件の記事があります。 現在 1 ページ中の 1 ページ目です。

3.0 LLMのトークン化とデータ前処理の自動化|効率的なデータクレンジングと前処理パイプライン

LLMのトレーニングに必要なトークン化とデータ前処理の自動化について解説。Pythonコード例とHugging Faceライブラリを使用し、データクレンジングと効率的な前処理パイプラインの構築方法を紹介します。
2024-11-09

2.2 LLMのトレーニングデータ準備と前処理|Pythonでのデータクレンジングとトークナイゼーション

LLMのファインチューニングに必要なデータ準備と前処理を解説。Pythonを使用したデータクレンジング、トークナイゼーション、データセット整理の方法を紹介します。
2024-11-07

2.1 Hugging Face Transformersを使ったモデルのファインチューニング|BERTのPython実装例

Hugging FaceのTransformersライブラリを使って、BERTモデルのファインチューニングを行う方法を解説します。Pythonコード例と共に、データ前処理やトレーニング設定のポイントも紹介。
2024-11-06

チーム

任 弘毅

株式会社レシートローラーにて開発とサポートを担当。POSレジやShopifyアプリ開発の経験を活かし、業務のデジタル化を促進。

下田 昌平

開発と設計を担当。1994年からプログラミングを始め、今もなお最新技術への探究心を持ち続けています。