LLM入門
このページでは、AI技術に関心のある方のために、LLM(大規模言語モデル)の基礎から応用までをわかりやすく解説します。
3.1 LLMのサブワードトークナイザーの使用方法|BERTやGPT-2でのトークン化の解説
サブワードトークナイザーを使用したLLMのトークン化方法を解説。Hugging FaceのBERTやGPT-2トークナイザーを使用し、Pythonコード例で具体的な実装方法を紹介します。
2024-11-102.1 Hugging Face Transformersを使ったモデルのファインチューニング|BERTのPython実装例
Hugging FaceのTransformersライブラリを使って、BERTモデルのファインチューニングを行う方法を解説します。Pythonコード例と共に、データ前処理やトレーニング設定のポイントも紹介。
2024-11-062.0 LLMモデルのファインチューニング|Hugging Faceを使った効率的な微調整手法
Hugging FaceのTransformersライブラリを使用して、LLMのファインチューニングを行う方法を解説。トレーニングデータの準備から評価までの具体的な手順を紹介。
2024-11-059.2 LLMの実装に向けたリソースと学習の提案 - 効果的なツールとコースの活用
LLM(大規模言語モデル)の実装に必要なリソースや学習方法を紹介します。オープンソースフレームワーク、クラウドプラットフォーム、データセット、オンラインコースなど、実践的なアプローチに必要なリソースを提供します。
2024-10-276.2 Pythonを使ったLLM実装例 | Hugging Face, OpenAI, Google Cloud, Azureを活用したテキスト生成
Pythonを使ってLLM(大規模言語モデル)を簡単に実装する方法をエンジニア向けに解説。Hugging Face、OpenAI、Google Cloud、Azureを使用したテキスト生成や感情分析の実装例を紹介します。
2024-09-266.1 LLMを試すためのオープンソースツールとAPIの紹介 | Hugging Face, OpenAI, Google Cloud, Azure
LLM(大規模言語モデル)を試すための主要なオープンソースツールやAPIをエンジニア向けに解説。Hugging Face、OpenAI、Google Cloud AI、Microsoft Azure Cognitive Servicesの特徴と使用方法を紹介し、簡単な実装例も提供。
2024-09-256.0 実際にLLMを試してみる | オープンソースツールと簡単な実装例
LLM(大規模言語モデル)を実際に試すためのオープンソースツールやAPIを紹介し、エンジニア向けにPythonを使った簡単な実装例を提供します。テキスト生成や会話ボットの構築、デプロイ方法についても解説。
2024-09-24