かれこれ数年付き合ってきたstan ですが、 推定の遅さが仕事上かなりネックになっており、 メインで使うPPLを高速にMCMCを回せるNumpyroに変えようと模索中。 以下、RとStanで始めるベイズ統計モデリングによるデータ分析入門のデータ&分析内容を題材に、Num…

今日のお悩み あるディレクトリ内に、同じようなCSV・xlsxをたくさんつくって、後で結合しなきゃいけない とか 100個レイアウトが同じデータがあるんだけど結合作業が死ぬ とかで困ったことがある人は絶対いると思うんですが、 Excelで一発ですよ。 というお…

コロナ影響による陰りがありつつ、データサイエンス人気は依然として高そうです。 僕自身も、データサイエンス・データアナリティクスは引き続きビジネスにあたって、なくてはならない技術でありつづける気はしています。 （コレだけでは食っていけなくなる…

デザイン・分析アイデア public.tableau.com powerbi.microsoft.com d3js.org www.storytellingwithdata.com datavizproject.com data-viz-lab.com From data to Viz | Find the graphic you need デザイン素材 icooon-mono.com free-line-design.com kage-d…

Tableauでネットワークグラフを可視化しようとすると、座標データをどう用意するかが一番ネックになると思います。 現状、Tableau内でネットワークグラフを自動生成する機能は無さそうです。 ので、この辺の処理はPythonを噛ませると楽にできるので、ちゃん…

プログレスバーなんてtqdm一択じゃね？ という結論で落ち着く話ではありそうですが、 なんとなく、「もっとライブラリの種類あるのかなぁ？」と思って調べてみました。 環境はgoogle colabです。 tqdm たぶん誰もが使ったことがあるおなじみtqdm github.com …

タイトルのとおり、今回のアーキテクチャはこんな感じです。 超シンプル！ 自分のandroidの電源プラグ抜き差しの情報を IFTTT 経由で Googleスプレッドシート に流し、 さらに Tableau Public の Googleスプレッドシートコネクタで情報取得、Publicギャラリ…

一般的にスクレイピングを使用とすると、requestsでHTMLなりjsonなりを拾ってくるのが一般的かと思われます。 Python, Requestsの使い方 | note.nkmk.me ただ、tableタグで構造化されている場合、pandasだけでデータを拾ってこれるので大変お手軽です。 例え…

この記事は Microsoft Power BI Advent Calendar 2019の12/22 担当分です お話の要点 タイトルとおり、「Power BI」との出会いが僕の人生を変えた話。 ただのポエムなので、Qiitaでなくこちらに書きました。 新しい技術・知識の習得に取り組むのはいいぞ、と…

皆様、新年あけましておめでとうございます。 昨年は、このブログを開設したり、MVP受賞したり、転職したり、引越ししたり、激動の１年となりました。 昨年をもろもろ振り返り、現在のスペックを記録し、今年１年の抱負でも書き残しておこうと思います。 １…

データ分析の高度化・民主化・効率化 BIを活用する理由はこの３点に集約されるというのが私の考えです。 これらの言葉を聞いて少しでも関心を持ったら少しでもBIの利用・運用について試してみて損はないと思います。

Matplotlibでグラフ描写する際、アスペクト比でちょっとはまってしまったので覚書メモです。 グラフ描写準備 import numpy as np import matplotlib.pyplot as plt import seaborn as sns %matplotlib inline plt.style.use("ggplot") x = np.linspace(-3,3,…

私事ではございますが、この度転職させていただくこととなりました。 本日が最終出勤日、１０月１６日から渋谷で働きます。 引越しなども伴う家族総出の大決断になってしまいました。 今後は、企画&ポイント事業会社さんでデータアナリストとして働きます。 …

QiitaにてPython×PowerBI記事を連載することにしました。 PowerBIはともかく、初心者の方はPythonの敷居がめちゃくちゃ高い方も多いのではないかと思います。 私自身、胸を張って書けると言えるレベルではないですが、 どのようにしたらPythonで楽しくコーデ…

2018年7月1日付けで、Microsoft MVPを受賞しました！ カテゴリは Data Platform での受賞です！ ・・・このブログでの報告はなんと紛らわしいｗ 本業のPowerBI関連の活動実績が認められました。 PowerBIに魅了されて約３年、色々な勉強と啓発の機会をいただ…

さて、前回に引き続き、今回は集計・検定を実施してデータの理解をさらに深めたいと思います～。 ただし、データが大きいので、検定はあくまで方法論だけって感じですね。 集計 集計は、可視化と並び、データの基本的な傾向を把握するために必須といっていい…

さて、前回に引き続き、銀行のキャンペーンマーケティングデータに基づく分析をネタにした勉強記録ですー。 データの可視化 まずは、データのheadを確認。 df.head() .dataframe tbody tr th:only-of-type { vertical-align: middle; } .dataframe tbody tr …

このカテゴリは本業、データ分析系のお話やTipsです。 Qiitaに書くレベルではない自分の覚書や練習記録、情報提供として残していこうかと。 qiita.com １年後に「まだ自分はこの程度だったのか～ｗクソダサいww」というのが目標です。 つーかブログ趣旨とギ…