気に入った記事をブックマーク
- 気に入った記事を保存できます
保存した記事の一覧は、はてなブックマークで確認・編集ができます
- 記事を読んだ感想やメモを書き残せます
- 非公開でブックマークすることもできます
Python: pandas の永続化フォーマットについて調べた - CUBE SUGAR CONTAINER
22 users
blog.amedama.jp
blog.amedama.jp
blog.amedama.jp
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
以前、このブログでは pandas の DataFrame を Pickle として保存することで読み込み速度を上げる、とい... 以前、このブログでは pandas の DataFrame を Pickle として保存することで読み込み速度を上げる、というテクニックを紹介した。 blog.amedama.jp 実は pandas がサポートしている永続化方式は Pickle 以外にもある。 今回は、その中でも代表的な以下の永続化フォーマットについて特性を調べると共に簡単なベンチマークを取ってみることにした。 Pickle Feather Parquet 使った環境とパッケージのバージョンは次の通り。 $ sw_vers ProductName: Mac OS X ProductVersion: 10.13.5 BuildVersion: 17F77 $ python -V Python 3.6.5 $ pip list --format=columns | egrep "(pandas|feather-format|
blog.amedama.jp
blog.amedama.jp
blog.amedama.jp
blog.amedama.jp
kensuu.com
note.com/s_tameiki
shueisha.online
foobar138428.hatenablog.com
zenn.dev/yasuna
www.itmedia.co.jp
www.publickey1.jp
coliss.com
www.itmedia.co.jp
pc.watch.impress.co.jp
coron.tech
www.toshiboo.com
hitoikigame.com
2020/01/05 リンク