楽しみながら理解するAI・機械学習入門

New Pages

【論文解説】OpenAI GPT-4 を理解する

非常に話題になっている ChatGPT ですが、OpenAI のWebサイトにアクセスして使うのではなく、API の形で Python を使って利用する方法を解説しています。

これがわかれば、自分で GPT を使ったチャットシステムを作ることができます。

非常に話題になっている ChatGPT ですが、OpenAI のWebサイトにアクセスして使うのではなく、API の形で Python を使って利用する方法を解説しています。

これがわかれば、自分で GPT を使ったチャットシステムを作ることができます。

話題の ChatGPT の裏側の仕組みである InstructGPT を解説しています。

今までの GPT に、「人によるフィードバックを利用した強化学習; RLHF (Reinforcement Learning from Human Feedback)」という技術を利用しているところがポイントです。

面白い仕組みになっているので、ChatGPT の裏側にある仕組みに興味がある方は是非読んでみてください。

OpenAI の ChatGPT が非常に話題ですが、それに対抗して Google も『Bard』というシステムを公表しました。

OpenAI が一歩進んでいるという風に言われていますが、中身を見ると Google の仕組みも面白く、それぞれ一長一短があります。

ここでは、Bard の裏側のモデルである『LaMDA』について解説しており、ChatGPT の InstructGPT と比較することで、どのような違いがあるかが理解できます。

ChatGPT を使って、センター試験の英語を解かせてみました。

多少プロンプトをいじる必要はあるものの、結構いい点が取れるようになっています。

間違え方もある程度意味が通っていて非常に興味深いです。

何点になったかは記事をご参照ください♪

最近では、機械学習の本はたくさん出版されていて、本屋に行ってもどれが選べばよいのかわからなくなってしまいそうです。

こちらの記事では、実際に私が読んで本当に役立ったと思える本をご紹介しています。

定番の本が中心ですが参考にしてみてください。

私は本を使って勉強することも多いですが、初めて勉強する分野などについては、まずUdemyやCourseraの講座で勉強することが多いです。

そこでデータサイエンティストになりたい方、データサイエンティストが最低限知っておくべき内容が含まれている講座をご紹介しています。

割引セールだと1000円～2000円ぐらいで受講できるので、すごくオススメです。

Fundamental Knowledge

入門編 – 自然言語処理をはじめて勉強するという人向けに、基本的な概念などを説明しています。

応用編 – ある程度基礎は知っているという人向けに、モデルや論文の解説をしています。

Practice & How to Study

実践編 – 実際のデータを使用して、TensorflowやPlotlyなどで色々なモデルを構築、データ分析などをしています。

勉強方法 – 自然言語処理を学ぶにあたってオススメの勉強方法や本などを紹介しています。