ChatGPTに代表される大規模言語モデル（LLMs）が、プロンプトだけで試行錯誤しながら学習する能力を持つかどうかを調べた最新の研究が発表された。Krishnamurthy氏らの論文「Can large language models explore...

目次 概要 サンプルコード Prompt Templates LLMs Document Loaders Indexes Chains Agents おわりに 概要 LangChainは、言語モデルを利用したアプリケーション開発のためのフレームワークです。このフレームワーク...

筆者は普段あまりゲームをプレイしないが、大規模言語モデル（LLM）とゲームの関係について興味を持ち、この機会にゲームについて少し勉強も兼ねて本記事を執筆することにした。本記事では、「Large Language Models and Games: A Survey and...

グローバルコンサルティング企業のマッキンゼーが発表した最新レポート「Unleashing developer productivity with generative AI（生成AIで開発者の生産性を解き放つ）」によると、生成AIの活用により、ソフトウェア開発者のコーディン...

CaDE.の記事は主にLLMに関する最先端の研究論文の解説や、高度な技術の説明を中心に掲載している。しかし、肝心の「そもそもLLMって何なのか」という基本的な部分の解説記事が抜けていることに気づいた。 最近、LLMを使ったサービスやアプリケーションが増えてきた。OpenAI...

この記事からわかること 大規模言語モデル（LLM）は、事前学習と微調整の2段階の学習プロセスを通じて、多様な自然言語処理タスクに対応することができる。 GPTのアーキテクチャは、Self-Attention機構、ポジショナルエンコーディング、フィードフォワードネットワークな...

本記事は「Attention Is All You Need」と題されたTransformerに関する論文(12 Jun 2017)の内容を含んでいる。ここでは、単語の位置情報を使った言語理解について解説する。 この記事からわかること...

最近、Github Copilotを始めとするLLMを用いたプログラミングをサポートするサービスを耳にします。 これにより、開発工数の削減や品質の向上など、システム開発における課題が解決できることを期待されています。 弊社でも以前から上記の様な課題があったことから、今回導入...

今まで一度もChatGPTを触っていない、あなたへ。今、あなたのAI観を一変させましょう！たった３手。無料です。

Paul Iusztinらが公開した「LLM Twin: Building Your Production-Ready AI Replica」と題したweb記事をベースに、自分そっくりに振る舞うAIレプリカ「LLM Twin」の仕組みと可能性について解説する。LLM...

こんにちは、今日もLLMしてますか？ さて、今日は、OpenAIがテストを始めているmemory機能についてです。 (もうすでに一部の人は利用しているかもです。) https://openai.com/blog/memory-and-new-controls-for-cha...

こんにちは、今日もLLMしてますか？ さて、私の最初の投稿として、以前から試してみたいと思っていた、大きいパラメータ数のLLMを手元のMacbook pro で動かしてみたことを記事にしてみました。 手元のmacのスペックは、右の写真の通り。...