Traffine I/O

日本語

LLM
LLM
LLM

LLMアプリケーションにおけるチャンク

2023-08-30

LLMアプリケーションにおけるチャンク

LLM(Large Language Model)を活用したアプリケーションの開発には、テキストの効果的な処理が不可欠です。この記事では、その中でも特に重要な「チャンキング」に焦点を当てて解説します。チャンキングは、大きなテキストを小さなセグメントに分割するプロセスで、ベクトルデータベースからのコンテンツ取得の関連性を最適化します。記事ではいくつかのチャンキング手法の紹介と、最適な選択方法に関する要素について説明します。

Machine Learning
Machine Learning
NLP
NLP
LLM
LLM
Vector Database
Vector Database
LLMのコンテキストサイズとベクトルデータベース

2023-08-28

LLMのコンテキストサイズとベクトルデータベース

この記事では、LLMのコンテキストサイズの拡大の課題と、ベクトルデータベースによるLLMの精度改善とコスト削減について紹介します。

Vector Database
Vector Database
LLM
LLM
ChatGPT Retrieval Pluginを使ったSlack Botの構築

2023-08-05

ChatGPT Retrieval Pluginを使ったSlack Botの構築

この記事では、ChatGPT Retrieval Pluginを使って独自の情報を元にChatGPT風に回答するSlack Botの構築方法を紹介します。システムはGoogle Cloud上で構築されます。

Machine Learning
Machine Learning
NLP
NLP
LLM
LLM
Vector Database
Vector Database
Pinecone
Pinecone
OpenAI
OpenAI
ChatGPT
ChatGPT
FastAPI
FastAPI
Google Cloud
Google Cloud
Cloud Run
Cloud Run
Cloud Functions
Cloud Functions
Slack
Slack
ChatGPT Retrieval Plugin

2023-06-11

ChatGPT Retrieval Plugin

この記事では、文書の意味検索と取得を可能にするChatGPT Retrieval Pluginについて紹介します。

Machine Learning
Machine Learning
NLP
NLP
LLM
LLM
Vector Database
Vector Database
OpenAI
OpenAI
ChatGPT
ChatGPT
ベクトルDBと独自データを使用したLLMシステム

2023-03-30

ベクトルDBと独自データを使用したLLMシステム

この記事では、独自の情報を含んだLarge Language Model(LLM)システムの構築方法について説明します。

Machine Learning
Machine Learning
NLP
NLP
LLM
LLM
Vector Database
Vector Database
LLM (大規模言語モデル)

2023-03-29

LLM (大規模言語モデル)

この記事では、大規模言語モデル(LLM)について、その能力、種類、および課題について説明します。

Machine Learning
Machine Learning
NLP
NLP
LLM
LLM