楽しみながら学ぶ AI 入門

※ 本サイトはプロモーションが含まれています

NLP

: 大規模言語モデルをだます Hindsight Neglect タスクとは

2023/4/23 GPT, NLP

今回は GPT-4 のテクニカル・レポートで出てきた『Hindsight Neglect』というタスクをさらっと解説したいと思います。『Hindsight Neglect』(日本語に直訳すると後知 ...

AI・機械学習自然言語処理

: OpenAI の ChatGPT がセンター試験の英語を受けたら何点ぐらい取れるか試してみた

2023/3/3 GPT, NLP, OpenAI, 自然言語処理

2022年11月にOpenAIから“ChatGPT: Optimizing Language Models for Dialogue”というタイトルでChatGPTのアプリケーションが公開されました。 ...

AI・機械学習自然言語処理

: Transformers BERT日本語モデルでセンチメント分析

2022/10/16 BERT, NLP, Transformers

さて、今回はHugginFaceのTransformersとBERT日本語モデルを使ってセンチメント分析をしたいと思います。 BERTを使ったセンチメント分析は以前こちらの記事でしましたが、今ではTr ...

AI・機械学習自然言語処理

: 【入門者向け】Perplexityを直観的に理解する

2024/4/7 NLP

今回は、BERT や GPT3 などの言語モデルを評価する際に一般的に利用されている perplexity (パープレキシティ)について解説したいと思います。ここでは、厳密な説明というよりは直観的に ...

AI・機械学習自然言語処理

: 【論文解説】Open Domain Question Answering 『RAG』を理解する

2021/6/20 BART, NLP, Open QA, RAG, 自然言語処理

今回はOpen Domain Question Answeringの第三弾としてFacebookから提案された『RAG(Retrieval-Augmented Generation)』を紹介したいと思 ...

AI・機械学習自然言語処理

: 【論文解説】自然言語処理と画像処理の融合 - OpenAI 『CLIP』を理解する

2022/10/12 CLIP, NLP, OpenAI

今回はOpenAIの『CLIP(Contrastive Language-Image Pre-training)』を解説したいと思います。 CLIPは画像の分類に利用されるモデルですが、今までのモデル ...

AI・機械学習画像認識自然言語処理

: 【論文解説】Open Domain Question Answering 「REALM」を理解する

2021/6/20 NLP, Question Answering

前回、オープン・ドメインの質疑応答タスクに対して、BERTを全面的に採用し、End-to-Endで学習することができるORQA(Open Retrieval Question Answering)を紹 ...

AI・機械学習自然言語処理

: 文章から画像を生成するOpenAI 「DALL-E」について解説

2022/7/26 GPT, Image GPT, NLP, OpenAI

2021年1月5日にOpenAIのサイトに「DALL·E: Creating Images from Text」という記事が公開されました。 OpenAIは最近、自然言語処理技術を使って非常に自然なニ ...

AI・機械学習画像認識自然言語処理

: 【論文解説】Sparse Transformerを理解する

2021/6/20 NLP, Transformer

さて、今回はOpenAIから提案された、attentionを効率化することで長い系列を取り扱うことを可能にしたSparse Transformerの論文について解説したいと思います。この仕組みはGP ...

AI・機械学習画像認識自然言語処理

: 【論文解説】Longformerを理解する

2021/6/20 Longformer, NLP, Transformer

では、今回は『Longformer: The Long-Document Transformer』について解説したいと思います。 LongformerもReformerやSparse Transfor ...

AI・機械学習自然言語処理

1 2 3 Next »