LoRAによる大規模言語モデルのファインチューニング

ChatGPTをはじめとする大規模言語モデル（LLM）は、その高度な言語処理能力で注目を集めています。しかし、LLMベンダーが提供するモデルを利用する場合、利用料金の問題や、機密情報を含むデータの外部への漏洩リスクが懸念 […]

【LLM活用】LangChainとLLMLinguaでプロンプト圧縮

近年、ChatGPTをはじめとする大規模言語モデル（LLM）が、私たちの生活に大きな変化をもたらしています。これらのモデルは、膨大な量のテキストデータを学習することで、人間と自然な対話をしたり、文章を生成したりすることが […]

近年、大規模言語モデル（LLM）は、その高度な自然言語処理能力により、様々な分野で注目を集めています。しかし、LLMの能力を最大限に引き出すためには、詳細な指示や情報を盛り込んだ、長文のプロンプトが必要となるケースが少な […]

LLM（大規模言語モデル）を活用したアプリケーション開発が盛んになる中、LangChainやLlamaIndexといった優れたフレームワークが注目されています。これらのツールは、LLMの活用を容易にする様々な機能を提供し […]

大規模言語モデル（LLM）は、もはや一部の研究者や開発者にとどまらず、私たちの生活に身近な存在となっています。文章生成、翻訳、情報検索など、その応用の場は多岐にわたります。しかし、LLMの進化はそれだけにとどまりません […]

近年、大規模言語モデル（LLM）が急速に発展し、自然言語処理の分野において革新的な成果を挙げつつあります。しかし、LLMにはいくつかの限界も存在します。例えば、訓練データに含まれない情報や、常に最新の情報にアクセスできな […]

Difyとは？ Difyは、プログラミングの知識がなくても、ノーコードでLLMアプリケーションを作成できる、オープンソースプラットフォームです。Backend as ServiceとLLMOpsの概念を融合しており、LL […]

WordLlamaとは？ WordLlamaは、大規模言語モデル（LLM）の部品を再利用して作られた、効率的でコンパクトな単語表現モデルです。LLMから抽出した単語の埋め込み情報を基に、様々な自然言語処理タスクで活用でき […]

Ollamaは、ローカルPCでオープンソースの大規模言語モデル（LLM）を簡単に利用できる、非常に魅力的なツールです。今回は、Windows環境にOllamaを導入し、LLMを利用する方法について紹介します。 Ollam […]

人工知能（AI）は、現代の組織、特に中小企業（SME）の発展と競争力向上において重要な要素として認識されている。しかし、AIの導入には、コスト、技術的スキルの不足、従業員の受容性といった重要な障壁が存在する。本稿では、こ […]