タグ検索の該当結果が少ないため、タイトル検索結果を表示しています。
EC事業部エンジニアのharashoです。この記事はEC事業部ブログリレーの13日目の記事で、12日目は@ku00さんによるカラーミーショップの一機能をAngular Elementsで実装しましたでした。 タイトルがこの記事の結論になりますが、私が遭遇したCSVファイルの読み込み処理で起きた不具合と原因、対応方法について書きます。 CSVファイルの読み込み処理で起きた不具合 不具合の原因 BOMについて 対応方法: BOMを取り除く おわりに CSVファイルの読み込み処理で起きた不具合 私が開発に携わったカラーミーリピートの一括発送アプリには、注文に対する発送リストをCSVファイルから一括登録して、発送処理を行う機能があります。以下はその機能の簡単な流れと、CSVファイルのイメージです。
import os import pandas as pd #ゲットファイルリスト path = 'testData/' files = os.listdir(path) train_csv = list(filter(lambda x:(x[0:6] == 'train_' and x[-4:] == '.csv'),files)) #ゲットCSVデータ data_list = [] for fileitem in train_csv: tmp = pd.read_csv(path + fileitem,header=0) data_list.append(tmp) #結合 dataset = pd.concat(data_list,ignore_index = False)
NumPyで、CSV（カンマ区切り）やTSV（タブ区切り）などのファイルを配列ndarrayとして読み込むにはnp.loadtxt()またはnp.genfromtxt()、ndarrayをCSVやTSVファイルとして出力（保存）するにはnp.savetxt()を使う。 便宜上、タイトルおよび見出しではCSVとしているが、カンマ区切りに限らず任意の文字列で区切られたテキストファイルを処理できる。 最後に触れるように、ヘッダー（見出し行）を含んでいたり、数値の列と文字列の列が混在していたりするファイルの読み書きにはpandasが便利。 また、他のアプリケーションで使う必要がなければNumPy独自のバイナリ形式で保存する方が楽。以下の記事を参照。 関連記事: NumPy配列ndarrayをバイナリファイル（npy, npz）で保存 本記事のサンプルコードのNumPyのバージョンは以下の通り。バー
JavaScriptで外部のCSVファイルを読み込んでデータをHTML上に展開する | オウンドメディア | 大阪市天王寺区ホームページ制作｜合同会社デザインサプライ-DesignSupply.LLC-
先日クライアントワークで、CSVで管理しているデータをサイト上に表示させたいというような要件があり、いろいろ調べてみるとJavaScriptで出来そうという情報が見つかったので試してみました。CSVとは半角コンマで区切られた値のことで、詳…
CSVをいじりたい C#からCSVをいじりたいとき、ありますよね。 Webの世界ではJSONあたりが一般的ですが、社内システムなんかではまだまだ現役だったりします（ですよね？）。 C#でCSVを読み込むとなると、以下の3つの方法が考えられるかと思います。 1. string.Split(',')でがんばる CSVは単にカンマで区切られただけのファイルなので、場合によってはこれが一番簡単です。 ただし、各要素の中にカンマが入っていたり改行が入っていたりすると途端にめんどくさくなります。というか無理なのでは。 2. TextFieldParserを使う こいつは結構優秀で、カンマが紛れ込んでいようが改行が突っ込まれてようがパースしてくれます。 ただし各要素を string[]で返してくるので、クラスに詰め込み直すのがちょっと面倒です。1行読み込んだら1インスタンスで返して欲しくないですか？（わ
はじめに こんにちは！ 18年10月にデータマイニング推進部に中途入社したY.Saと申します。 これまでは主にシステムの運用やSQLを使用してシステムテストなどを経験してきました。 エム・フィールド入社後も社内研修だけでなく、社外でもLT(Lightning talks、5～10分程度の短い発表）を行ったり、勉強会に参加しています。 今回の記事では18年10月に参加したPyData.tokyo One-day Conference 2018という勉強会で紹介されていたNVIDIAが開発したRAPIDSというライブラリ群の1つ、cuDFというライブラリについて紹介します。 コードを使った実例に入る前にNVIDIAとGPUについてすこし紹介します。 NVIDIAはGPU（Graphics Processing Unit）を開発して販売しているアメリカの企業です。 GPUは大量の単純な計算を高速
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
CSVファイルを読み込むときはBOM付きUTF-8に気をつける - Pepabo Tech Portal
pandasで複数CSVファイルを読み込んで、結合する - Qiita
NumPyでCSVファイルを読み込み・書き込み（入力・出力） | note.nkmk.me
![混雑していないカフェが見つかるアプリ「imako」、ひと息つきたい・ちょっとパソコン作業したいときに [てっぱんアプリ！]](https://cdn-ak-scissors.b.st-hatena.com/image/square/2628dbc01d99563b1664671303c97064ab37c9fc/height=288;version=1;width=512/https%3A%2F%2Fk-tai.watch.impress.co.jp%2Fimg%2Fktw%2Flist%2F1621%2F606%2Fthumbnail.jpg)
【C#】CsvHelperでMappingクラスを使わずにCSVファイルを読み込む - TERRYのブログ
GPUを使ってCSVファイルを読み込むcuDFを使ってみた | エム・フィールド - Tech Blog
youtu.be
hamabe-koko.hatenablog.com
www.bellmare.co.jp
b.hatena.ne.jp
www.watashinoarukikata-diary.com
cookpad.com