ChainerでLSTMを実装し、株価予想に挑戦します。過去1年半の株価データを使いamazon株の株価を予想します。 ・予測した株価をSlackへ通知する方法, まずは、機械学習を使用して株価を予測するために必要なパッケージ（道具）をインストールしていきます。, ・numpy … 数値の計算を効率化するパッケージ（簡単にいうと電卓） もしよろしければ他の記事もご覧くださいませ。 ③予測モデルの学習 次の段階としては精度を上げていくために、, ・全ての上場企業ではなく東証１部上場企業のみに絞ったらどうなのか？ ai（人工知能）を使った株価予測とはいったいどのようなものか気になりますよね。ai（人工知能）が日常生活に浸透しつつある中で、aiを使った、株価予測を行うアプリがあるのをご存知でしょうか。そこで、ai（人工知能）を使った株価予測アプリについてお伝えします。 ・pandas … 集めたデータをcsvファイル化するパッケージ（簡単にいうとエクセル事務員） 精度が低い理由として考えられのは、やはりデータ数が少ない部分でしょうか。少しずつ学習範囲を広げ精度を上げていこうと思います。, 基本的に一度モデルを作り、そこからは精度をいかに上げていくかのサイクルに入っていきます。 Tweets by ai_deep_kabu 利用規約抜粋 本サービスのWebページ（今ご覧のページ）を閲覧したり、Twitterで本サービスが運営するアカウント (@ai_deep_kabu) をフォローした場合、下記の利用規約に同意したものと見なします。予想の売価は0円です。 コメント、また記事をご覧いただきありがとうございます！ 2020/12/03 - 「人工知能」に関連する銘柄一覧。このカテゴリに関連する225銘柄の株価、関連度、株価変動率を掲載。人工知能(ai)は今や株式市場における最強のテーマといっても過言ではない。市場の有力テーマであるバイオ創薬やドローン、自動運 ②データの加工 ai(人工知能)を使った株価予測システムというと実際に高い的中率をはじき出しているものもあり今後当たり前の存在になるかもしれません。とはいってもどのようなものであるかわからない方もいるでしょう。それではai(人工知能)を使った株価予測システムを紹介します。 Finance のページにアクセスした後、 page.send_keys(Keys.END) でスクロールダウンしていますが、スクロールが足りないようで結局古いデータの XPath を取得できていません。スクロールダウンの回数を増やして対応してみました。, while文を使ってスクロールダウンを 20回実行、すると古いデータの 2009年1月の位置まで画面を下げることができ、古いデータの XPath の取得にも成功。そして古い 2009 年 1月 5日の株価も取得できています。あとは最初にアクセスする URL の証券コードを 日経225 の企業のモノに変えれば、 225社の株価データを取得できそうです。, 225社を順番に Yahoo! 機械学習やDeep LearningなどのAI（人工知能）分野のプログラミングで、現在最もよく使われる言語がPython（パイソン）。Pythonで実装された様々なAI関係のライブラリを使うことで、手軽にAIに触れることができます。 この記事を読んで、Pythonを通してAIに触れるための第一歩を踏み出しましょう！ F-Trder 公式サイト. ここで紹介しているPythonも機械学習をプログラムできる言語ですが、この実用的な利用法として「 株価の予想 」があります。 既にサービスを始めているものが日経平均騰落予想AI「F-Trader」です. (adsbygoogle = window.adsbygoogle || []).push({}); ①データの収集 ・機械学習（ランダムフォレスト分析）について 株価予測と言えば機械学習、こちらもpythonでやっていきます。 機械学習といえばライブラリの使用ではないでしょうか？ この本はライブラリ初学者におすすめだということなので、4月中にやり終えようと思います。 今回解説する人工知能は、ココングループ内のいわば余興で作成したもので、社内の忘年会で発表するLTで2017年有馬記念のAI予想を行う、という目的で作成したものです。 しかし、作ってみると意外なほど良いものが出来上がり、少なくとも数字上は馬券の購入金額以上の払い戻しが期待できるモデルが作成されました。 このモデルは、以下のGitHubにて公開しています。 https://github.com/cocon-ai-group/turf-tipster ちなみにラ … まずは過去25分の4本値と2σのボリンジャーバンドの値を入れてみました。 Epoch 99/100 1375742/1375742 [==============================] - 5s - loss: 0.6915 - acc: 0.5242 - val_loss: 0.6922 - val_acc: 0.5196 Epoch 100/100 1375742/1375742 [==============================] - 5s - loss: 0.6915 - acc: 0.5237 - val_loss: 0.6923 - val_acc: 0.5193 Epoch 99/100 1375742/1375742 [==============================… PythonとAPIを使って株価データの取得にチャレンジ "APIを使って株価を取得" というわけですが、次は "どの API" を使うか、という点が問題に。 Google で 「株 API」 と検索すると Rakuten RapidAPI が紹介されますが、こちらは難易度が高めです。 日経平均株価ai予想というサイトでドル円為替レートのai予想が公開されていましたが、どれだけの精度なのかが公表されていないため、日次でaiの予想結果を確認し精度を検証してみたいと思います。 pip のドキュメント（今回使用）, まずは Yahoo Finance API のライブラリを読み込み。 Google Colab で pip をインストールする場合は、最初に ! Finance API" を使って過去の株価データ取得にチャレンジ。, Yahoo Finance API の使い方は、 公式ドキュメント をみると YQL とか登場して、ちょっと学習時間が必要そう... ということで、 PyPi に公開されている Yahoo Finance API のライブラリを使って対応することに。, 【Yahoo Finance API】 50%の確率で予想が当たるということは50%の確率で予想が外れるということですね,,, ©Copyright2020 Winey Trade.All Rights Reserved. ・scikit-learn … 機械学習を行うパッケージ（簡単にいうと考えてくれる脳）, 今回は計算が早く、出力結果の説明もはっきりしているランダムフォレスト分析を用います。, ※ランダムフォレスト分析とは、以下のようにそれぞれ別の判別基準をもつ決定木をたくさん集め、そこから多数決で出力結果を決める分析です。. 最新の予測技術では株式相場の騰落を的中率90％で判定可能。aiファンドは実際の資金を投じた試験運用の段階にある。個別銘柄の株価予測サービスも近々登場する予定だ。 機械学習で株価予測～scikit-learnで株価予測②：特徴量選択とデータの標準化、正規化～ 機械学習で株価予測～scikit-learnで株価予測③：特徴量の重要度を可視化し、ワンホットエンコーディング、ビニング、交互作用特徴量、多項式特徴量を試す～ ・直近5日の前日比のデータのみではなく、もっと増やしてみたらどうか？ aiトレードとは？ 「aiトレード」という言葉を最近目にするようになりました。 普段は株などをしない方にはあまり馴染みがないかもしれませんが、投資家の間ではホットなワードです。 aiトレードとは文字通りai（人工知能）を用いて株式や仮想通貨の取引や、fxをすることを指します。 Finance のページがいいかな、という結論に（下図参照）。, Yahoo! 下のように、説明変数のみを抽出した箱を作り検証データと訓練データに分けます。, 次に訓練データの方をランダムフォレスト分析で訓練して、検証データで検証し予測結果へと続きます。, 結果は50.62%でした。 Pythonによる財務分析③ -バフェットコードを用いて完全レクチャー！ (全8回), Pythonによる財務分析⑦ -バフェットコードを用いて完全レクチャー！ (全8回), ・pandas … 集めたデータをcsvファイル化するパッケージ（簡単にいうとエクセル事務員）, ・selenium … サイトからデータを抽出（スクレイピング）するパッケージ（簡単にいうとエクセル事務員）, ・scikit-learn … 機械学習を行うパッケージ（簡単にいうと考えてくれる脳）, ）に掲載されている値上がり率上位 50社の直近５日間の前日比データをスクレイピング. ・selenium … サイトからデータを抽出（スクレイピング）するパッケージ（簡単にいうとエクセル事務員） ・機械学習で株価を予測するプログラムの作成方法 そして気になる銘柄のデータを分析しようとパソコンやスマホを開いたら、概ねチャートしか出てこないと思います。これではエクセルなどでデータとして株価を扱えないために、データ分析ができません。ところが、プログラミングを使えば無料で株価データを取得できます。, 今回は 「API」 と 「Webスクレイピング」 2つ の方法を用いて、 日経225 にリストアップされている会社の株価を Python で取得してみました。, 株に興味ある、プログラミング（Python）にも興味あるという方、ご参考ください。, "CodeCampus"はオンラインプログラミングスクール No.1のCodeCampが運営するプログラミング未経験の方のための学習メディアです, Webサービスは、 「Yahoo!Japan ファイナンス」 のような Webサイトで、簡単に過去のデータを確認する事が可能。, Yahoo!Japanで大和証券の過去のデータを確認している様子（上図の URL）, 通常は Yahoo! この10年で大和証券の株価は、 3分の1になっているんですね。, さて今回わざわざ API を使って株価データを取得しているのは、 日経225の銘柄について昔と今の価格を比較するため。最初に API の URL 設定で使った "証券番号" を任意のモノに変えれば全銘柄のデータを収集できそうです。, 日経225の証券番号が入った CSVファイルを用意して、上図のようにループ処理を実行してみました。, すると 6回目の実行時に KeyError: 'Monthly Time Series' とエラーが。これは API のアクセスリミットを超えたために発生したと思われるエラーです。, ここのプログラムで利用している APIサービス：Alpha Vantage は、 1分間に 5回までしか URL にアクセスすることができませんDocuments。, 実際に 6番目の証券番号 4519 に個別アクセスして、価格取得のプログラムを実行すると、エラーなくデータ取得できました。, APIサービス：Alpha Vantage の仕様にしたがって、 "1分間に 5アクセス" とすると 225銘柄チェックするだけで 25分も時間がかかってしまいます。この問題をクリアするために、次は Yahoo! データが取れていない原因としては、「APIキーアクセスエラー」「API側のデータ不足」が考えられますね。 Yahoo Finance API のアクセス制限は、 2000回／時、 1分間に 30回、 2秒で 1回という計算に。試しに time.sleep(3) を入れて実行してみましたが、データは取得できませんでした。. ただ URLでアクセスした際、過去のデータを確認しようと思うとページを最下部までスクロールダウンする必要があります。ページ操作が伴うことから今回は スクレイピングライブラリ：Selenium を使って挑戦してみました。, まずは Yahoo!Finance にアクセスして、適当な銘柄を入力し、検索。 今回は 4151（協和キリン） をセット、そして Time Piriod の項目で期間を選択（今回は 2009年1月1日から直近）。, このページの一番上の項目の "Date" と "Close" をスクレイプできれば直近データを取得できます。古いデータはページの最下部にありますので、スクロールダウンして確認します。, まず今画面に表示されている直近のデータですが、表の中のデータとなるため find_element_by_xpath() でスクレイプ指定するのが妥当そう。 XPath の値は、ブラウザ上で欲しいデータ上で右クリック、 "要素を調査" を選択。そしてデベロッパーモード内の HTML コード上でまた右クリックし、コピー、 XPath を順に選択。これで XPath を取得でき、ブラウザ上の欲しいデータを取得できます。, 古いデータの XPath は画面をスクロールダウンして、 Date と Close の XPath を取得します。, Yahoo! 目次 はじめに プログラミング プログラムファイルを作成する プログラミング プログラムを動かしてみる 結果を確認してみる 次回に向けて はじめに 本記事では、株価を予想するai（人工知能）の作り方を紹介しています。 今回は、aiの本体となるプログラムを行います。 日経平均株価ai予想サイトの検証！！2019年6月 . この問題を回避しようと思うと、株価一覧の上部に表示されている 「Download」 ボタンが良さそうです。, しかし、 Selenium でこの "ダウンロード" を実行しようと思うと...ムリでした。理由は、 タグに script を埋め込んだり、複雑なクラス構造にしたり、 CSVファイルの URL を拡張子ナシに設定されているため。スクレイピング防止措置とも思えるコードの内容です。, Yahoo!Japanの株価時系列データならスクレイピングできるかもしれませんが、こちらはダウンロードが有償設定。公の場でスクレイプすると著作権侵害になるかもしれませんので、やめておきます。, 結局スクレイピングで取得できたデータは、 46銘柄分で、プログラムの実行にかかった時間は約 2時間。 100回目のスクレイピングで Webページの読み込みに失敗して価格を参照できていないことが確認できます（上図参照）。 株価データの取得も容易でないことが確認できますね。逆にいえば、需要はありそうなので、 Bot に株価データを毎日記録させる、そしてそれを売る、というのも面白いかもしれませんね。, 当メディアを運営しているCodeCampではPythonデータサイエンスコースを現役エンジニアのマンツーマンレッスンという形で提供しています。このコースの特徴は, 無料レッスン受講後の申し込みで10,000円クーポンをプレゼントしています！ぜひお試しください。, 今回 2種類の API、 1種類の Webスクレイピングで株価データの取得に挑戦しました。残念ながら日経225社分の 10年前の株価を一気に取得することはできませんでしたが、 Yahoo Finance API が一番早く、一番多くのデータを取得できました。, 月50ドルなどお金を払えば "APIサービス：Alpha Vantage" も使いやすくなると思いますが、個人利用で 月50ドルは大きいと思います。, 「株価分析やってみたいけど、プログラムのこと難しいな...」「スクレイピングや API 興味あるけど、難しいな...」 と、悩んでいるあなた。一度プログラミングスクールを検討してみるのはどうでしょうか？, なかなか前に進めずに悩んでいた方が、CodeCamp を受講し、前進している例はたくさんあります（一つの例）。 「お金がない！」「時間がない」 と決めつける前に、一度無料体験でレッスンの価値を体験してみませんか？, 無料体験は、完全オンラインで実施しますので、予定さえ合えばどこからでもレッスンを体験できます。この機会に是非、 CodeCamp の受講、 無料体験、検討してみてください。, 【データサイエンス】YouTube DATA API を使ってユーチューバーの情報をゲットしよう, 様々なフィールドで活躍するエンジニアを育てていきたい【CodeCamp人気講師 #12 舘先生】, https://www.alphavantage.co/query?function=TIME_SERIES_INTRADAY&symbol=9434.T&interval=5min&apikey=APIキー, https://www.alphavantage.co/documentation/. 概要本稿はある数学教授の宝くじ当選の物語を紹介してから、Pythonを使ってNUMBERS3過去25年分の当選番号を取得するクローラーを実現した上、LSTMアルゴリズムで次回の当選番号を予測するプログラムを実現します。1. これで勉強させてもらいます。, のんさん （データを収集し、それをもとにレオパレスの株価を予測しています）, 次回のコメントで使用するためブラウザーに自分の名前、メールアドレス、サイトを保存する。. 損切（予想と逆に値動きした場合）でも 30pips値動きしたら注文を閉じます。 2016年1月1日00時00分から2017年1月1日00時00分のデータで実行しました。 まずはプログラムソースです。 （Python勉強中なので見苦しい点はご容赦ください） 関連記事. ⑤予測結果をSlackで通知する, データは株式投資メモ（URL：https://kabuoji3.com/）に掲載されている値上がり率上位 50社の直近５日間の前日比データをスクレイピングします。, ※スクレイピングとは、インターネット上に公開されているデータを自動で取得してくる事を言います。ここでは、株式投資メモというwebサイトに公開されているデータを自動で取得していきます。昔はデータを手動でエクセルに打ち込んでデータ収集を行なっていましたが、今ではpythonを駆使する事で自動でやってくれるので非常に便利です。, また、他に必要なデータとして、選択した銘柄である「レオパレス21」と直近５日間の日 付データを取得します。, データの加工は、本来のデータサイエンスで言えば一番時間をかけるところですが集めた データ自体綺麗であるため、上のデータに日付データと「レオパレス21」のデータを付随させ、株価を比率に変更するだけでOKです。, 次は予測モデルの学習です。 (Slackへの通知では予測値が表示されていたのですが), 結論、「今回使用したコード」の206~209行、#モデリングと予測の箇所です。 ・他の予測手法に変えて見たらどうか？, 機械学習による株価予測は初めてでしたが、精度的にはやはりまだまだ思うようにはいかないものですね。, これからも精度をガンガン上げれるように精進いたしますので、他にも何か良い方法などがあればコメントで教えていただけると大変嬉しいです。, ※当サイトは投資を促進しているものではありません。このモデルを使用する際による損失等は自己責任でお願いいたします。当サイト主は一切の責任を負いかねます。, めっちゃ面白いです、まさに自分がやってみたかった事！ プログラム作成時間については "慣れ" もあるかもしれませんが、 Webスクレイピングの場合は スクレイピング失敗時の処理が必須です。 API の場合は、アクセスに失敗する機会が少ないので、 "必須" でなくても大丈夫。, API ・・・ Yahoo や Rakuten などの APIプロバイダーが定める URL にアクセスすると、データを取得できるサービス。無料のモノから有料のモノ、 キーが必要なものから不要なものまで種類がある。 アプリ開発などでよく使われるデータサービス。, "APIを使って株価を取得" というわけですが、次は "どの API" を使うか、という点が問題に。 Google で 「株 API」 と検索すると Rakuten RapidAPI が紹介されますが、こちらは難易度が高めです。いくつか検索した結果、以下の API サービスが "使いやすいな" と思いました。, 2つとも株価を取得できる APIサービス ですが、利用できる内容や取得できる情報は違ってきます。, 「何のために株価データを集める必要があるのか？」 という点を考慮して APIサービスを検討するようになると思います。 例えば 「APIサービス: Alpha Vantage」 の方は、 1時間に 300回までしかアクセスできません。つまり 1分あたり 5回、 12秒に 1回、 APIからたくさん情報を欲しい場合、例えば 5秒おきの株価データや東証全銘柄のデータサーチなどには厳しいということ。, ただ 「APIサービス: Alpha Vantage」 については、比較的簡単なプログラム処理できることから、まずはこちらのサービスから使って情報をゲットしてみたいと思います。, 今回株価データを取得する目的は、 「ブログを運営している会社と運営していない会社を比較するために株価を収集」 となり、トレーダーの方とはデータ収集の目的が若干異なりますが、データを扱う様子は参考になります。, まずは APIサービス：Alpha Vantage がどんな様子で使えるのか確認してきます。, 公式ページ： https://www.alphavantage.co/ にアクセスして、画面中央右に表示されている 「GET YOUR FREE API KEY TODAY」 をクリック（上図参照）。すると上図右のようにいくつか入力する項目があって、最後に 「GET FREE API KEY」 をクリックすると、メールアドレスに紐付いた "API キー" が発行されます（下図参照）。, 次はその "APIキー" の使い方で、ページ上部の 「DOCUMENTATION」 をクリックし、左サイドバーの 「Intraday日中」 をクリック。, 少しページを下にスクロールすると、サンプルの URL が書かれています（下図参照）。, 試しにサンプルの URL にそのままアクセスしてみると、株価データが返ってきます。これは JSON形式のデータで、ページを更新してアクセスする度にデータ内容が変化します。, 実際に先ほど取得した "API キー" を使って、ソフトバンクの今の株価データを取得してみました。, API URL : https://www.alphavantage.co/query?function=TIME_SERIES_INTRADAY&symbol=9434.T&interval=5min&apikey=APIキー, するとソフトバンクの株価データは取得できているのですが、よく見ると時間がアメリカ東部時間。そして東証は 9時から、つまり 約40分前から始まっているのに、 JSON データは 約20分前のものしかありません。. これまでも、感情分析を利用して株式市場の動向を予想する研究が行われてきました。 高精度な株価予測モデルを目指している方のために、この記事では、機械学習で株価予測を行うために使えるデータセットを10個まとめました。 日経平均の過去 n 日の騰落（上昇 or 下落）をもとに明日の騰落を当てる。結果、全然ダメでした。予測正解率は安定的にほぼ 50 %。なぜ予測が上手くいかないのか考えてみました。続落または連騰した翌日の動き･･･コイントスの裏表を見て次はどっちか当てるようなものです。 つまり APIサービス：Alpha Vantage は手軽に使えるが、タイムラグがあったりしてライブデータとしてはやや不十分です。今回はデータ分析が目的で、時間にはそれほどシビアではないので大丈夫ですが... 先程まではソフトバンク株（9434.T）を見ていましたが、 こちらは日経225には組み込まれていないため、大和証券（8601.T）の株価を API で取得してみたいと思います。, まずは取得する株価の URL を確認。 ドキュメントページ https://www.alphavantage.co/documentation/ にアクセスして、 Monthly の項目を確認。サンプルの URL を元に証券番号を 大和証券の 8601.T に変更し、APIキーをセットします。, そしてプログラム（Python）上で URL にアクセスし、情報取得できるよう必要なモジュール、ライブラリをインポート（上図参照）。 URL から取得できたデータを確認すると、先ほどブラウザで見ていた JSON データが表示されていることが確認できます。, APIを使って取得したデータを、 変数： data に格納したわけですが、どんなデータが入っているか data.keys() で確認してみましょう（上図参照）。すると株価データとはあまり関係ない Meta Data という項目も。今回は株価データだけでいいので、 Monthly Time Series の要素だけを使用。 変数： data を Meta Data のない、 Monthly Time Series だけにします（上図参照）。改めて data を出力すると、 先程はあった Meta Data が消えていることが確認できます。, 作り変えた 変数： data の内容を確認すると、情報量は 239項目で膨大（上図の一番上のコード）。試しに 変数： data の キー を確認すると日付データが 239 出力（data.keys()）。, 一番古いデータと一番新しいデータは、Pythonモジュール： sorted() を使えば取得できそうで、実際のコードが上図最下段のプログラムになります。, -1 とすることで一番最後のデータ、つまり直近のデータを取得することができました。, 現在の 変数: data は辞書型で、そのキーは日付データ（オレンジ色塗りつぶし部分）、キーとセットになっている値は ["〇〇"] （紫色塗りつぶし部分）の追加で取得できますので、上図最下段のように data[new_date]["4. close"] とすることで、 変数: data の最後の値の価格を取得できます。 が必要。, 次に pip のページに書かれているサンプルを実行。 PyPi ページに書かれているコードをそのまま Colab にコピペ。そして実行してみるとタイムスタンプ（timestamp）のデータが表示されます。, symbol_data.keys() でデータの内容を確認すると、 タイムスタンプ以外に株価データがあることが確認できます（上図参照）。, Yahoo Finance API でどれぐらい過去データが取得できるか確認してみます。上図左が 30年前、 上図右が 20年前、 APIへのアクセス結果 20年前も 30年前も同じだけのデータ取得量（5007） となっていることが確認できます。, 昔と今の株価を取得するにあたって "いつ" の株価データであるか、ということが必要になってきますので、まずは Yahoo Finance API で返ってくるデータの中から timestamp だけ 変数： date に格納（上図最上段のコード）。, 次は 変数: date の最初と最後のデータをピックアップ（上図上から2段目のコード）。すると 946944000000 という、とても時刻とは思えないような結果が。これは "タイムスタンプ" 形式の日時データで、普通の 19:05 みたいに変換することもできます。, しかし上記コードではエラーがでてます。これは取得した時刻データのタイムスタンプが、ミリセカンド単位となっているため。タイムスタンプのデータをセカンド単位に変換することで時刻表示を変換することができます（上図最下段）。, タイムスタンプを上記のようにコピペしてチェックすると、タイムスタンプの単位を確認できます。, 次は Yahoo Finance API から返ってきたデータの close キー部分を確認。 close キーの価格データを一旦 変数： price に格納し、最初と最後のデータを抽出します。すると20年前と今の株価を取得することができましたね。, 今回は一つの銘柄のみに対して、日時や価格を取得してきました。 "銘柄" を決める証券コード部分を 日経225 にセットされている企業のコードに変えれば、簡単にたくさんの株価データを取得できそう、ループでいけそうですね。, 日経225に登録されている企業の証券コード 225 個分をループ処理している様子です。, 取得できたデータを確認してみると、ところどころデータが取得できていないことが確認できます。 4月中 株価予測をする. で株価を検索するとチャートが表示されると思いますが、 「時系列」 のメニュータブをクリックすると過去のデータを確認することが可能。ただし、このデータをエクセルなどで使おうと思うと 月2,178円払って会員になるか、各ページのデータをコピペする必要があります。 "お金" か "手間" がかかるということですね。, 次に取引ツールの代表格である 「楽天マーケットスピード」 で過去のデータを確認してみました。, 楽天マーケットスピードの場合は、過去データを確認すると同時に CSV ファイルで無料ダウンロードできるのですが、 最大 10年前までのデータです。そして選択できる "時間足" は、 "日"、 "週"、 "月" のみ。 "分" や "時間" 足の過去データは取得できません。, このように提供されている汎用ツールを使うとある程度のデータは取得できるものの、いくつかの妥協点が生じます。こうした問題はプログラミングを使うと幾分か解決されますのでご紹介していきますね。, Webスクレイピングというのは、 Webページ上のデータに "プログラムから" アクセスして、 必要な HTMLコード（データ） を取得するというもの。 Webスクレイピングに関する情報量は多く、難易度も比較的低いことから、プログラミング初心者でも扱いやすい技術として有名です。 Finance の Webページをスクレイピングして株価データを収集, URLに証券コードを盛り込み、アクセスすればページ移動することなく 18年前（2001年）のデータにアクセスできます。 人工知能（ai）を使った株価の予測プログラムを作ってみたい 以前から人工知能（ai）に興味があって、最近、関連する書籍を買って読んでいます。その書籍に載っているサンプルプログラムを動かしながら勉強しています。 「python 株価 機械学習」という何のひねりもないキーワードでGoogle検索したら上の方に出てきますので、これを読んでる人からすると今さら私が紹介しても既知の情報すぎると思いますが、実際に予想を立てるロジックを作るのに非常に参考になりました。 50社の株価から機械学習で正解率を出すところまでは分かるのですが、そこからレオパレスの株価を予測するところのコードがどこにあるのかがよくわかりません。 (Slackへの通知では予測値が表示されていたのですが) 教えて頂けませんでしょうか。 (adsbygoogle = window.adsbygoogle || []).push({}); 機械学習を使用して株価を予測するには、使用するパッケージをしっかりと選定し、データを収集できるウェブサイトを見つけたらシンプルな予測であれば想像よりも簡単にできてしまいます。, プログラミングを始めたばかりの初心者や、株式投資について興味を持っている方に分かるように作成しました。, この記事を読んでわかること（出来ること）は Finance で調べていくと、ところどころデータの取得エラーが発生。調べてみると株価データ内に 「10 Dividend配当」 といった情報がありました。, この配当に関する項目のせいで XPath の値が一致せず、エラーが発生していると考えられます。 お楽しみいただけて、うれしいです！, プログラミング関連の記事は下記URLにまとまっておりますので、 ・データ数は50では少ないためもっと増やしてみたらどうか？ Pythonでローソク足のチャート・株価分析 2020/07/29【更新】「株で大儲けしたい！」誰しも一度は考えたことがあるかもしれません。そこで、ディープラーニング技術を使い、機械学習させ、株価を予想させてみたいと思います！目指せ不労所得… ④予測結果を出力する ・別のサイトからスクレイピングしたらどうか？ https://wineytrade.com/category/programming/, 使用したコードの、 ただし、 "HTML" からデータ取得しますので、 Webデザインが変わったりすると該当のデータを得られません。また概ね Web上の株価データというのは、 "日足" が最小単位。 "時間" や "分足" などの細かいデータの取得はできません。, 一方 API については、 "分足" や "時間足" のデータ取得も可能。 "API" というと敷居が高いように感じられる方もいらっしゃるかもしれませんが、サンプルコードを使えば大丈夫でしょう。 "Webスクレイピング" と "API" の違いについては以下のような感じに。, Webスクレイピングは、 Webページからレスポンスがあって初めて HTMLコードを解析できるために、プログラムを実行しても即座にデータ取得できる訳ではありません。そのため API に比べると Webスクレイピングの方が "データ取得までにかかる時間" が "長い" としています。 Finance API を使ってデータ取得を試みてみました。, 先ほどの APIサービス：Alpha Vantage に比べてアクセス制限が緩い "Yahoo! gmoインターネット 次世代システム研究室が新しい技術情報を配信しています | はじめまして、次世代システム研究室のk.s.（女性、外国人）です。 今回は「深層強化学習で株の売り買いの予測ができるか」、にチャレンジしてみました。これについて紹介したいと思います。 公式ドキュメント、 50社の株価から機械学習で正解率を出すところまでは分かるのですが、そこからレオパレスの株価を予測するところのコードがどこにあるのかがよくわかりません。 50%の確率で予想が当たるということは50%の確率で予想が外れるということですね,,, 精度が低い理由として考えられのは、やはりデータ数が少ない部分でしょうか。少しずつ学習範囲を広げ精度を上げていこうと思います。, https://wineytrade.com/category/programming/. 前回、TensorFlowを使い、東証一部上場のH社の株価を本当に予測してみました。 、 その結果は、当たるには当たったのですが、、、、 とはいえ、GWという長期連休のいろいろな要因が関連し、 結局前日のフランス大統領選でマクロン氏が勝利を収めたことが 一番、影響したような気がします。 そこで、今回は普通の平日に、普通に予測してみるということをしてみます。 さらに、複数の企業の株価を予測してみましょう。 上図のように個別に銘柄データをチェックしてみると、やはり 10年前のデータは取得できず、 4ヶ月ぐらいまでのデータに。どうもAPI側にデータがないようです... 一部データが不十分という結果にはなりましたが、 Yahoo Fina APIを使って株価を取得することができました。今回は東証の株価データでしたが、銘柄部分を仮想通貨やゴールドなど Yahoo!Finance で公開されているモノに変えれば色々な価格データを収集することが可能になります。, API を使った後なので少し "インパクト" に欠けるかもしれませんが、参考までに Webスクレイピングを使って株価データを取得する例もご紹介します。, Webスクレイピングを使って株価データを取得する場合、データを取得しやすいようになるべくキレイにフォーマットされたページが Good です。いくつか確認した結果、 Yahoo!