pandas

1/19ページ

過去のデータからビッグデータ分析で株価を予測する

今日は 15 年ぶりに日経平均が 19,000 円台を一時回復し、 6 月末までには 2 万円に達するのではとの声も出ていますが、そんな中ビッグデータ (笑) 分析で株式の分析をする話です。 効率的市場仮説 金融の世界には効率的市場仮説というものがあり、どのような情報を利用しても他人よりも高いパフォーマンスを継続してあげることは不可能であるという説があります。これほど誤解されたりあるいは都合良く解釈されたものはないと筆者は考えます。 こ […]

pandas + matplotlib による多彩なデータプロッティング

科学技術計算用言語としての Python そもそもなぜデータ分析などの科学技術計算を Python でやるのでしょうか。主に次の二点によります。 NumPy, pandas, matplotlib など豊富なライブラリが揃っている 汎用性の高いグルー言語として利用できる データフレームを利用した計算とそのグラフ描画 (プロッティング) のみであれば R のほうがどちらかといえば簡単かもしれません。しかし統計解析を汎用性の高い Pytho […]

pandas のデータフレームを D3.js で表示するまでの取り扱いまとめ

D3.js によるデータの可視化はインタラクション、探索的データ可視化といったメリットをもたらします。見た目にも動的で派手、かっこいいといった特徴があります。 以前に D3.js について書いた記事を振り返って見ます。 D3.js + NVD3 + Sinatra + Heroku で作るインタラクティブなデータ可視化デモ http://qiita.com/ynakayama/items/f661b493751370ee6568 これと […]

python pandasを用いたデータ分析

python pandas numpy関係 N=1のデータならipython notebookが便利 N=10以上のデータで繰り返し処理をする人はipythonのまま使う方が便利 ただclass等を使いobject志向風にするとやりづらい面があるので解決策を模索中 class ClassName: def __init__(self, filename): self.data = pd.read_csv(filename) self.f […]

Python+pandasを使ってRSSフィードを取得→Mattermostに投稿&DBに保存

やったこと Mattermostを導入してなにかやってみたかったので、RSSフィードを投稿するプログラムを作りました。(あとで、公式のプロジェクトがあったことに気づいたのは秘密) いろいろと応用が利くかなと思い、取得したfeedをpandasで処理して DBに格納することとしました。 ※Mattermostってなんぞやって言う人はこちら 環境 CentOS7 Python2.7 pandas feedparser sqlalchemy […]

pandasのプロット機能を使いJupyter上で作図

環境 OS X El Capitan 10.11.6 python: 2.7.11 pandas: 0.18.0 matplotlib: 1.5.1 numpy: 1.10.4 IPython: 4.1.2 初めに Pythonによる作図のおすすめ10 Pythonには様々な作図方法があり、matplotlibというライブラリを使うのが基本です。ただそれは少し野暮ったいので楽にオシャレに描けるようにするseabornというラッパーがあり […]

【初心者向け】33分4秒でおぼえる野球統計学とPyData〜陽岱鋼を添えて

ストーブリーグって楽しいですねこんにちは! このエントリーではみんな大好きプロ野球と,最近巷で流行っている&自分も仕事・趣味両方で活用しているpandas他を使った,野球統計学「セイバーメトリクス」の例を紹介したいと思います. なお,この記事はPython Advent Calendar 2016 12/4分の記事となります&記事を読んでコードを写経して動かすまでの所要時間は33分4秒くらいを想定しています. Start […]

POG上達のためのデータ解析2 〜jupyter notebookで解析編〜

前回までのおさらい POG上達のためのデータ解析1 〜Pythonでwebスクレイピング〜 では2010〜2013年の期間に生まれた馬のプロフィール(性別、血統、厩舎など)とPOG期間中の獲得賞金を取得した。 得られたデータは”horse_db/horse_prof_(yyyy).csv”というファイル名で生まれ年ごとに分けて保存している。 今回の目的 今回はこれらのデータを基に馬のプロフィールとPOG期間中の獲 […]

無料で読めるデータ分析に役立つ Python の電子書籍まとめ

以前、機械学習や統計に関する情報収集についてまとめました。今日はその続きというか補足で、データ分析に役立つ無料で読める Python E-book をまとめました。 ここにある PDF を取り敢えず手持ちのタブレットか PC に突っ込んでいつでも必要なときに参照すると良いでしょう。毎回 Google 検索しても良いですが、確実に理解しておきたい基礎となる知見はやはり書籍で持っていたほうが安心です。 プログラミング言語 まずは Pytho […]

1 19