京橋のバイオインフォマティシャンの日常

南国のビーチパラソルの下で、Rプログラムを打ってる日常を求めて、、Daily Life of Bioinformatician in Kyobashi of Osaka

R - magrittr

【R言語とWebスクレイピングとアニメーショングラフ】仮想通貨や株価変動をバー・チャート・レースで観察してみた件【その1 日経225・Nikkei225 編】

はじめに 実行環境 Rパッケージの準備 日経225銘柄のデータ取得 日経225銘柄でのバー・チャート・レース 日経225 上位20銘柄でのバー・チャート・レース作成 日経225 下位20銘柄でのバー・チャート・レース作成 まとめ 参考資料 Rコード: getNikkei225.R は…

R言語/Webスクレイピングで、Wikipediaページのテーブル情報からNASDAQ-100の銘柄リストを取得して、2021年中の株価推移を見てみた件

はじめに NASDAQ-100のWikipediaページ、Rでの下準備 NASDAQ-100 使用するパッケージの事前準備 Wikipediaページからの銘柄リストの取得 NASDAQ-100 NASDAQ-100銘柄の年間パフォーマンスをアニメーションにする 1年間のパフォーマンス ツリーマップのアニメ…

R/rvestを使って、Google画像検索で画像サムネイルを取得して、機械学習・ディープラーニング用の4次元アレイデータに変換するTips

はじめに パッケージの準備 画像の取得・変換を行う関数の定義 事例1: 「ペルシャ猫」をクエリとした画像検索の結果 事例2: 「広末涼子」をクエリとした画像検索の結果 Webスクレイピングについての関連図書 まとめ 作成したスクリプト English page (Google…

テキスト解析ワークフローをまとめてみた件

テキスト解析で考慮すべき13のポイント【随時更新予定】 Rプログラム テキスト解析で考慮すべき13のポイント【随時更新予定】 No 大項目 小項目 DB / Tools 備考 1 タスク選定 テキストマイニング / 固有表現認識 (NER) / その他 2 言語 英語 / 日本語 /…

R/rtweetとか諸々を使って、つぶやきのテキスト解析 (形態素分析 + 感情分析) をやってみた件

はじめに rtweetの諸設定から もし「Error in default_cached_auth():」がでた時の対処 米国株をクエリに呟きを検索してみる。 つぶやきの形態素解析 単語感情極性対応表を使った感情分析 全つぶやきで、感情分析してみる。 まとめ 補足 M1 Macでのmecabのイ…

R言語におけるデータのテーブル表示: knitr & mmtable2とかの紹介

はじめに パッケージのインストール knitr::kableを用いた実行例 mmtable2を用いた実行例 参考資料 はじめに knitrパッケージは、R言語による動的レポート生成のための汎用パッケージであって、Literate Programmingの手法を用いたRでの動的なレポート生成の…

R言語/Webスクレイピングで、Wikipediaページからテーブル情報を取得する 〜日経225、米国ダウ平均株価、S&P500、NASDAQ-100とかの銘柄リストを取得して、株価も見てみた件〜

はじめに 各銘柄リストのWikipediaページ、Rでの下準備 日経平均株価(日経225) 米国ダウ平均株価 30銘柄 (Dow Jones Industrial Average) NASDAQ-100 S&P500 S&P100 使用するパッケージの事前準備 Wikipediaページからの銘柄リストの取得 日経平均株価(日…

R言語/Webスクレイピングで、Google サーチ / Google scholar経由で見つかったPDFファイルを自動ダウンロードしてみた件

はじめに ライブラリとかの設定 【初級編】Google サーチのキーワード検索でURL一覧を得る + 全URLをブラウザで開く方法 【初級編】特定のPDFファイルをダウンロードする方法 【一般資料の検索編】Google サーチのキーワード検索でURL一覧(.pdf)を得て、そ…

【Rのジミ〜な小技シリーズ】空リストの作成とリスト操作、それと空ベクトルを使ったベクトル結合とデータフレーム結合のトピックスを扱う

はじめに 空リストlist()からリストを作成する 空ベクトルc()からベクトルを作成する 空ベクトルc()からデータフレームを作成する %>% (パイプ演算子あるいは単にパイプ)について まとめ はじめに またもや、ジミーなトピックですけど、空リストlist()と空…

【R言語と学術論文】PubMed API「RISmed」と googletrans を使って、PubMed掲載論文のAbstract和訳をRでやってみた件

はじめに Rパッケージのセットアップ PubMed全体でキーワード検索をやってみる 少し脱線して、年ごとの論文数をまとめてみた 本題に入って、googletransによる論文情報の和訳とレポート作成をやってみる まとめ 全Rコード in gist 補足 MEDLINEタグ情報*5 Pu…