［解決！Python］CSVファイルの読み書きまとめ
# csvモジュールを使ってCSVファイルから1行ずつ読み込む import csv filename = 'populationdata.csv' with open(filename, encoding='utf8', newline='') as f: csvreader = csv.reader(f) for row in csvreader: print(row) # 出力結果： #['年', '地域コード', '地域', '総人口'] #['1920年', '00000', '全国', '55963053'] # …… 省略 …… #['2010年', '00000', '全国', '128057352'] #['2020年', '00000', '全国', '126226568'] # タブ区切りの文字を読み込む filename = 'tabdelimiteddata.ts
意外と奥が深い、HDFの世界（Python・h5py入門） - Qiita
ChainerやKeras、PandasやDask、Vaex関係などでちらほら見かけるHDF5（.h5とか.hdf5とかの拡張子のやつです）。 知識が無く以前は単なるバイナリフォーマットなのかと思っていましたが、しっかり勉強したら色々機能があって面白かったので、復習も兼ねてまとめておきます。 そもそもHDF5って？ Hierarchical Data Formatの略（5はバージョン）で、名前の通り階層化された形でデータを保存することができるファイル形式です。 ある種フォルダやファイルシステムに感覚が近く、1つのファイル内に整理しつつ様々な複数ファイルを保存できます。 HDF5のここが凄い とりあえず機能に色々触れだすと長くなるので、先にHDF5の、個人的に良さそうに感じた点を書いておきます。 読み書きがCSVなどより大分速い いくつか記事を見ていた感じ、パフォーマンスはpickleよりも
Python、Pandasを用いたExcelシート取り扱い - chirotec’s blog
今日のお題 前回の記事ではPythonとPandasを使ってExcelファイルを読みましたが、今回はその詳しい解説とその続きです。 C++,C#などでそこそこ熟練したプログラマーがPythonに初めて触れたときの感想、といった内容になってきました。 Excelシートの内容をDataFrameに変換 まずは前回記事のコードの解説からです。 # インポート import pandas as pd # ファイルのロード filename = "C:\work\in\実験.xlsx" file = pd.ExcelFile(filename, encoding='utf8') # シートをDataFrame型として読み込んで、リストに格納 df_list = [] for sheet in file.sheet_names: df_list.append(file.parse(sheet)) fo
Pythonでデータ分析するのに必要なツールのまとめ - Qiita
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? この記事について Pythonでデータ分析を行う際に役立つセットアップを紹介します。 データ分析に興味がある方はこちらも合わせてどうぞ データサイエンティストに興味があるならまずこの辺りを見ておきな、って文献・動画のまとめ（随時追加） - Qiita 実行環境 Jupyter(旧iPython Notebook) http://jupyter.org/ インタラクティブ（対話的）なコード実行のための環境 データ分析に非常に適していて、慣れると他のIDEなどでは分析ができなくなる。 任意に分けたコードブロックごとに実行し、結果を都度表示出
「Machine Learning for hackers」読了 - makotoiの日記:from London
Machine Learning for Hackersposted with amazlet at 12.06.06Drew Conway John Myles White Oreilly & Associates Inc 売り上げランキング: 543 Amazon.co.jp で詳細を見る Bit.lyのチーフサイエンティストの人もカンファレンスで推薦していた本だったのでバケーションやロングウィークエンドを利用して１０日ほどで一気読みしました。 この本の良いところは全てのコードサンプルがRで提供されている点。他のマシーンラーニング系の本はPythonなどのスクリプト言語と併用している場合が多いのでRに興味がある人は「Pythonまで勉強するのはめんどくさい」 と思ってしまうので良いかもしれません。あとRの知識も統計学の知識も特に前提としていないので、そういう話題（例えば行列計算など）に
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
遅いpandasのread_csvを高速化する方法(dask) - Qiita
PythonでCSVの読み書き - Qiita