【R言語とWebスクレイピングとアニメーショングラフ】仮想通貨や株価変動をバー・チャート・レースで観察してみた件【その1 日経225・Nikkei225 編】

R言語 Webスクレイピング R - Webスクレイピング Wikipedia ウィキペディアアニメーションバー・チャート・レース R - purrr R - quantmod R - rvest R - magrittr R - ggplot2 R - treemapify R - gganimate 日経平均日経225 Nikkei225

はじめに実行環境 Rパッケージの準備日経225銘柄のデータ取得日経225銘柄でのバー・チャート・レース日経225 上位20銘柄でのバー・チャート・レース作成日経225 下位20銘柄でのバー・チャート・レース作成まとめ参考資料 Rコード: getNikkei225.R は…

アニメーショングラフ R言語 Webスクレイピング日経225

2022-10-10

【R/binancerとか】仮想通貨の価格を秒速で取得・可視化してみた件

はじめにバイナンス R環境のセットアップ binancerを用いて、仮想通貨の現在価格を取得する coin360.comのテーブル情報から、マーケットキャップなどを取得するバイナンスから仮想通貨の価格変動を取得して、プロットする 3つの仮想通貨(BTC, ETH, BNB)の…

仮想通貨 binancer R

2022-08-20

【R言語と株価プロット】S&P500インデックス (SPY: SPDR S&P500 ETF) と仮想通貨（ビットコイン/BTC、イーサリアム/ETH）の季節性変動（Seasonality）を考えてみた件

Stock - S&P500 R - stock R - quantmod R - dygraphs R - plotrix R - htmltools R - format R - xaxs="i" R - month.abb Mac - R Webスクレイピング R - Webスクレイピング仮想通貨 R - 株価プロットビットコインイーサリアム par - family日本語設定米国株

はじめに seasonalityPlotパッケージを用いた季節変動性のプロット関連パッケージのインストール SPYチャートの季節変動性プロットビットコイン・チャートの季節変動性プロットイーサリアム・チャートの季節変動性プロット R言語/quantmodを用いた、SPYチ…

S&P500 SPY 仮想通貨 R言語株価変動

2022-08-17

【R言語とオープンデータ】アメリカ地質調査所が提供する世界中の地震データを地図表示してみた件〜初心者でもできるオープンデータを使った世界地図の簡単プロット〜

R言語オープンデータ地震マップ R - 地図表示 R - 地図プロット Webスクレイピングアメリカ地質調査所 (USGS) R - leaflet R - htmlwidgets R - htmlwidgets::saveWidget R - devtools R - htmltools

はじめにオープンデータの関連記事アメリカ地質調査所、および同研究所が提供する世界で発生した地震データのスプレッドシート過去1日地震データのスプレッドシートURL 過去7日地震データのスプレッドシート過去30日地震データのスプレッドシート leafle…

R言語オープンデータ地震データ地図可視化 Leaflet

2022-07-16

R環境で小説のテキストマイニングをやってみたら、○○○な結末になった件【その1: 夏目漱石の小説「坊っちゃん」を使った、テキストの前処理編】

R言語テキストマイニング Webスクレイピング R - テキストマイニング R - テキストの前処理 R - Webスクレイピング R - rvest R - RMeCab R - stringr 夏目漱石小説 - 坊っちゃん

はじめに連載シリーズの目次実行環境 1. 青空文庫、対象小説の紹介夏目漱石が執筆した小説の無料公開リスト 2. 「坊っちゃん」のテキストの前処理処理したテキストの保存まとめテキスト処理の関連記事参考資料はじめにテキストマイニングは、簡単…

2022-01-18

R言語/Webスクレイピングで、Wikipediaページのテーブル情報からNASDAQ-100の銘柄リストを取得して、2021年中の株価推移を見てみた件

はじめに NASDAQ-100のWikipediaページ、Rでの下準備 NASDAQ-100 使用するパッケージの事前準備 Wikipediaページからの銘柄リストの取得 NASDAQ-100 NASDAQ-100銘柄の年間パフォーマンスをアニメーションにする 1年間のパフォーマンスツリーマップのアニメ…

r wikipedia wikipedia スクレイピング web スクレイピング言語 web スクレイピングとは r web スクレイピング wiki スクレイピング web スクレイピング r r 言語スクレイピング

2021-09-21

R/rvestを使って、Google画像検索で画像サムネイルを取得して、機械学習・ディープラーニング用の4次元アレイデータに変換するTips

Google画像検索画像サムネイル DL - 学習データ R - magrittr R - rvest R - rvest::html_nodes R - rvest::html_attr R - xml2 R - xml2::read_html R - URLencode R - startsWith R - Google search Webスクレイピング R - Webスクレイピング R - formatC

はじめにパッケージの準備画像の取得・変換を行う関数の定義事例1: 「ペルシャ猫」をクエリとした画像検索の結果事例2: 「広末涼子」をクエリとした画像検索の結果 Webスクレイピングについての関連図書まとめ作成したスクリプト English page (Google…

2021-04-04

R言語のRSeleniumを使って、ブラウザ（自動）操作とWebスクレイピングをやってみた件〜Google検索でのトップヒットページ・ヒット件数・スクショの取得〜

Mac R - RSelenium brew - adoptopenjdk12 brew - geckodriver brew - chromedriver R - Webスクレイピング Python - Selenium R - ブラウザ自動操作 Webスクレイピングブラウザ自動操作ブラウザ自動操作 - firefox ブラウザ自動操作 - Chrome

はじめに事前セットアップ Webブラウザのダウンロード Webブラウザ操作用ドライバーのインストール Javaのインストール selenium.jarのダウンロード・実行 RSeleniumの使い方 - ブラウザ操作の基本 Google検索とか情報取得とかをやってみる検索結果を取得…

スクレイピング入門 r スクレイピングデータスクレイピング web スクレイピング入門スクレイピング web web ページスクレイピング R言語 RSelenium

2021-03-23

R/Slack APIの諸設定、slackrの使い方、及びGoogle scholarで検索された新着論文情報を知らせるTips

Mac Slack Slack App R R - slackr R - ChatBot R - devtools R - rvest Webスクレイピング R - Google search Google scholar

はじめに : R版Slack API Salck API設定の手順 1. Slackのワークスペースに、任意のチャネルを作る。(必要なら) 2. Slack アプリを新規作成する 3. Incomming WebhooksをActiveにする 4. Bot User OAuth Tokenの取得、OAuth & Permissionsの設定 5. Slack ア…

R Slack slackr

2021-02-20

R言語/Webスクレイピングで、Wikipediaページからテーブル情報を取得する〜日経225、米国ダウ平均株価、S&P500、NASDAQ-100とかの銘柄リストを取得して、株価も見てみた件〜

はじめに各銘柄リストのWikipediaページ、Rでの下準備日経平均株価(日経225) 米国ダウ平均株価 30銘柄（Dow Jones Industrial Average） NASDAQ-100 S&P500 S&P100 使用するパッケージの事前準備 Wikipediaページからの銘柄リストの取得日経平均株価(日…