データ分析実践 【データ分析実践】EDINET APIを使った決算書分析(Plotlyを使ったデータ可視化編)
前回はEDINETからEDINET APIを使って、企業の有価証券報告書情報(決算書)を取得し、さらにそこから欲しい情報を取り出せるようにしました。
今回はその取り出し情報を使って、データの可視化を行っていきたいと思いま...
データ分析実践
データ分析実践 
データ分析実践 【データ分析実践】EDINET APIを使った決算書分析(データ取得編)
今回から数回かにわたって、実際の決算書を使ったデータ分析をしていきたいと思います。
まずは決算データの取得や可視化、分析といったところから始めたいと思いますが、本サイトは自然言語処理をメインにしていますので、最終的には自然言語処理を...
データ分析実践 【データ分析実践】口コミを使ったキャンプ場に関する分析(BERT編)
今回はBERT(BidirectionalEncoderRepresentations fromTransormers)を使って文書分類(センチメント分析)をしたいと思います。
試すと言っても今回は自分の手で実装するのではなく、公開...
データ分析実践 【データ分析実践】口コミを使ったキャンプ場に関する分析(事前学習-ファインチューニング実装編)
以下の投稿では、事前学習-ファインチューニングについて解説しました。この考え方は非常に重要なので一度簡単なモデルを使って実装してみたいと思います。
事前学習-ファインチューニングとは
事前学習とは簡単に言うと、特定...
データ分析実践 【データ分析実践】口コミを使ったキャンプ場に関する分析8 ~Transformer実装編 ~
今回はTransformerで口コミの評価をしたいと思います。
Transformerは、RNNやCNNを使わないことから、高速に計算できるモデルとして、BERTやXLNetなどでも使われている重要な仕組みです。
理論的な解説...
AI・機械学習 【データ分析実践】RNNを使って文章生成を実装してみる
では、今回は今までの星の数当てではなく、再帰的ニューラルネットワーク(RNN)を使って、文章生成をやってみたいと思います。
こちらのTensorflowのチュートリアルを参考にしています。
RNNについては、こちらをご参照くだ...
AI・機械学習 【データ分析実践】口コミを使ったキャンプ場に関する分析7 ~Attentionメカニズム実装編 ~
Attentionメカニズムを使ったセンチメント分析
今回はLong Short-Term Memory(LSTM)にAttentionメカニズムを加えたモデルを作成したいと思います。
Attentionメカニズムについて...
データ分析実践 【データ分析実践】口コミを使ったキャンプ場に関する分析6 ~Convolutional Neural Network(CNN)実装編 ~
では、今回は畳み込みニューラルネットワーク(Convolutional Neural Network; CNN)を使ってみたいと思います。CNNは、主に画像系のディープラーニングで使われることの多いモデルです。
以下の論文を参考にモ...
データ分析実践 【データ分析実践】口コミを使ったキャンプ場に関する分析4 ~ Recurrent Neural Network, LSTM実装編 ~
前回はWord2Vecを使った単語の埋め込み表現を使って遊びました。その前は、Bag-of-Wordsモデル+ロジットモデルを使って、データの分析及びレビュー評価を行いました。
今回は、今までの知識を使いながらも、新たに再帰的ニュー...
データ分析実践 【データ分析実践】口コミを使ったキャンプ場に関する分析5 ~埋め込み表現を使ったBag-of-Wordsモデル実装編 ~
今回はまたしてもBag-of-Wordsモデルを使っていきたいと思います。ただ、前回のように単語の出現回数をもとにしたTF-IDFのようなやり方ではなく、前回使ったWord2Vecなどの単語の埋め込み表現を利用したモデルを構築したいと思い...