AI・機械学習 【論文解説】OpenAI GPT-4 を理解する
さて、ChatGPT が非常に盛り上がっていますが、2022年11月にリリースされた ChatGPT は GPT-3.5 というモデルがベースになっています。
そして、2023年3月にはその後継モデルである GPT-4 がリリースさ...
GPT
AI・機械学習 
AI・機械学習 大規模言語モデルをだます Hindsight Neglect タスクとは
今回は GPT-4 のテクニカル・レポートで出てきた 『Hindsight Neglect』というタスクをさらっと解説したいと思います。
『Hindsight Neglect』(日本語に直訳すると後知恵無視？) というタスクは、今非...
AI・機械学習 OpenAI 『ChatGPT』APIの使い方を解説
『ChatGPT』の公開以来、そのすごさ、問題点、使い方など様々な点から非常に話題になっていますね。
そして2023年3月1日からは API として利用できるようになりました。
そのため、ただ単に ChatGPT を使って遊ぶ...
AI・機械学習 OpenAI の ChatGPT がセンター試験の英語を受けたら何点ぐらい取れるか試してみた
2022年11月にOpenAIから“ChatGPT: Optimizing Language Models for Dialogue”というタイトルでChatGPTのアプリケーションが公開されました。
かなり話題になっているので知っ...
AI・機械学習 13億パラメータ日本語GPT-2を使ってみる
2022年1月にrinna社が13億パラメータを持つGPT-2の日本語モデルを公開し話題になっています。
rinna社は2021年8月にGPT2-mediumという3億強のパラメータを持つモデルを公開していましたが、今回のGPT-1...
AI・機械学習 文章から画像を生成するOpenAI 「DALL-E」について解説
2021年1月5日にOpenAIのサイトに「DALL·E: Creating Images from Text」という記事が公開されました。
OpenAIは最近、自然言語処理技術を使って非常に自然なニュースを生成することができるGP...
AI・機械学習 【論文解説】OpenAI 「GPT-3」を理解する
今回は、LINEによる汎用的な超巨大言語モデルの開発の話題もあり、GPT-2以上に話題になっているOpenAI GPT-3について解説したいと思います。
結構長い論文ですが、論文の最後の方の内容も非常に興味深い内容になっている論文で...
AI・機械学習 【論文解説】OpenAI 「GPT-2」を理解する
さて、今回は以前ご紹介したOpenAI GPTの進化版OpenAI GPT2を解説したいと思います。
現時点ではすでにOpenAI GPT-3が開発されていますが、まずはOpenAI GPT-2を理解していきたいと思います。
...