日本株式のデータをスクレイピングなしで取得・リストにしたい - Qiita
大きなデータを取り扱ってみたい！ 株価を分析するのって面白そう！ と思い立って調べてみると，海外の株式はPandasのDataReaderで案外簡単にデータとして手に入りますが， （例えばGoogle financeやFREDなど） 日本の株価は，案外データとして見つかりません． Yahoo!ファイナンスから引っ張ってくればいいじゃん！という記事は多いですが， Yahoo!ファイナンスはスクレイピングを禁止しているため，こちらから引っ張ってくるわけにもいきません． モジュールのjsmを使えば…という意見もあるかもしれませんが，こちらもスクレイピングを使用しています． 本記事は，スクレイピングなしでデータを取得し，ひとつのリストとすることを目的とします． せっかちな人のためのコード いいから結論だけ教えてくれ！って人のために（がんばってかいた）コードをおいておきます． 細かい点は各自修正をお
CSVファイルをDBにインポート | Sunvisor Lab.
サーバのテーブルに，CakePHP経由でアップロードしたCSVファイルをインポートする必要がありましたので，その処理を作ってみました。CSVファイルをサーバにアップロードし，そのファイルをDBにインポートするという手順になろうかと思います。 ビュー <div class="options form"> <div class="actions"> <ul> <li><?php echo $html->link('メニューに戻る', array('action'=>'index'));?></li> </ul> </div> <?php echo $form->create('Options', array('action'=>'upload', 'type' => 'file'));?> <fieldset> <legend>データのアップロード</legend> <?php echo $f
CakePHP - CSVダウンロード（エクスポート）機能を実装する『CSV Helper』 まとめ - たきゃはしです
CakePHP2対応したのCSVヘルパーはこちらです。 FastCSV ヘッダだとか文字化けで取っつき難いCSV関連 最初に言っておきます、CSV Helperはとても易しく使いやすいです。 →CSV Helper (PHP 5) ザッとマニュアルを見てから思い通りの実装・出力まで30分程度でした。 それでは、さっそく使い方を説明します。 １．まず、「app/views/helpers/」に「csv.php」を作成して 以下のソースをそのままコピペしてください。 <?php class CsvHelper extends AppHelper { var $delimiter = ','; var $enclosure = '"'; var $filename = 'Export.csv'; var $line = array(); var $buffer; function CsvHelp
C言語 空白で区切られたファイルの読み込み - stdio.h - [ fscanf ] | 勇躍のゴミ箱
C言語 目的別 画面への文字出力 画面へ1文字単位で出力 画面へ1行単位で出力 画面へ書式付きで出力 可変個引数を書式付き表示 キーボードから文字入力 入力を1文字単位で取得 入力を1行単位で取得 入力を書式付きで取得 ストリームに1文字戻す 文字列データの入出力 文字列から書式付きで取得 文字列へ書式付きで出力 可変個引数を書式付き出力 ファイルオープン ファイルを開く ファイルを閉じる ファイルオープンのモード 標準入出力について ファイルの読み込み テキストファイルの読込 空白区切りファイルの読込 CSVファイルの読込 バイナリファイルの読込 ファイルの書き込み テキストファイルの書込 CSVファイルの書込 バイナリファイルの書込 可変個引数をファイルへ書込 ファイル関連 ファイル位置の取得 ファイル位置の設定 ファイル位置の取得2 ファイル位置の設定2 ファイル位置を先頭に戻す フ
CSV形式のファイルをDataTableや配列等として取得する
CSV形式のファイルをDataTableや配列等として取得するCSV（Comma Separated Value）形式のファイルをDataTableや配列として読み込む方法を幾つか紹介します。ここでは3つの方法を紹介しますが、その前にCSVとはなにかについて確認しておきます。 CSV形式とは？CSV形式について、絶対的な決まりは存在していないようです。ただし、一般的なアプリケーションで使われている決まりについては、「CSV Comma Separated Value File Format (How To)」で説明されています。 要約しますと、次のようになります。 レコードは、LFまたはCRLFで区切られる。フィールドは、カンマ（,）で区切られる。区切りのカンマの前後のスペース（タブを含む）は無視される。フィールドにカンマが含まれる場合、フィールドをダブルクォート（"）で囲まなければならな
勝手に添削 - PerlによるCSVファイルの高速集計 2 : 404 Blog Not Found
2007年03月07日01:00 カテゴリLightweight Languages 勝手に添削 - PerlによるCSVファイルの高速集計 2 前回に引き続き、今回も引き続きcodezineさんの添削。 添削後のコード #!/usr/local/bin/perl use strict; use warnings; use Text::CSV_XS; my ($rfh, $wfh, %name_of, %addr_of); my $tc = Text::CSV_XS->new({binary=>1}); # to handle non_ascii; my $addr_file = shift or help(); my $q_file = shift or help(); my $out_file = shift; open $rfh, "<", $addr_file or die "$a
PerlによるCSVファイルの高速集計
はじめに Perlと言えば、いまだにCGIを思い浮かべる人は多いと思います。しかし、Perlは決してそれだけの言語ではなく、その言語仕様はテキストファイルを処理し、集計結果をレポートするのに非常に向いています。特によく利用されるテキストファイルとして、CSV形式が挙げられます。CSVを集計したい場合、Excelに読み込ませて集計関数やマクロを駆使しているという人も多いかと思いますが、Perlを利用することで、高度な集計作業を簡単かつ高速にできます。 本稿では、筆者がPerlでCSV集計を行う際によく使うノウハウを紹介したいと思います。 対象読者 まだ、Perl＝CGIと思っている方。 65,536件を超える大量のCSVデータを前に、手も足も出なくなっている方。 必要な環境 テキストエディタ。 Perl 5.8.X。ただし、ほとんどのコードはそれ以下のバージョンでも動きます。 Perlのイン
TechNet Script Center
Summary: Using PowerShell to identify RPC ports in use by capturing content from PowerShell We'd like to introduce you today to one of our newest bloggers! It's a froopingly awesome friend of ours, Joel Vickery, PFE. (did I mention Dr. Scripto is a big fan of books written by Douglas Adams?....oops!) Take it away Joel! Thanks Doc! So ...
CSV解析 - Natural Software
ちょいと入用でCSV解析のコードを書いてみた。 STLとBoostで完全C++コードになりましたとサ。 ＃使用は自己責任で #include <iostream> #include <fstream> #include <string> #include <stdexcept> #include <vector> #include <algorithm> #include <boost/tokenizer.hpp> void main( int argc, char* argv[] ) { try { // argv[1]を入力ファイル名とする if ( argc != 2 ) { throw std::runtime_error( "not input filename" ); } std::cout << "file name : " << argv[1] << std::endl;
Excel(csv)から一瞬にして大量のhtmlを作成する方法.vol2 | 楽してプロっぽいデザイン | Forty-N-FiveBlog
先日もご紹介しましたexcelからhtmlの変換ソフトですが、またまた便利なフリーソフトがありましたので紹介したいと思います。作業としては前にご紹介したこととほぼ同じです。テンプレートとなるhtmlを作成し、excelの1行目にタイトルを挿入したい位置に記入して、あとはフリーソフトを使って1発変換すれば、一瞬にして大量のhtmlを作成することができます。もしもドロップシッピングの商品CSVを利用して実施に作業した内容をメモしておきます。 下記のサイトよりフリーソフトをダウンロードします 全体で230KBぐらいなのでお手軽にダウンロードできます。bptran.exeこれがフリーソフトになりますので、こちらを使用することになります。（それ以外は、ソフトの解説やサンプルなどが内包されています。） Excelファイルを整理します もしもドロップシッピングのCSVより必要な部分を抜き出し、整理します
CSVエディター WEBアプリケーション、フリーCGI配布 ---ahref.org
インストーラーCGIについてのご注意 acmailer3より導入したインストーラーCGIは、ダウンロードしてから有効期間があります。（24時間） インストーラーCGI以外のインストール方法は現在ご用意しておりません（検討事項） acmailer3インストールの際は必ず、本サイトより最新版インストールCGIをご利用ください。 install.cgiの再配布・改変は行わないでください。 ログについて インストーラーCGIは、ダウンロード時に、固有のシリアルキーを生成し、 AHREFサーバー上で管理を行っています。 またインストーラーCGIの実行時、以下の３つの情報がAHREFに記録されます。 ・設置URL（リファラー） ・インストール日時 ・ダウンロードステータス（成功or失敗） ※個人情報は一切記録していません。 これらの情報は、バージョン管理、セキュリティー管理、ダウンロード
データベースをCSV形式でダウンロード - PHP/データベース
サンプルと機能 データベースを、CSV形式でダウンロードします。 → サンプル(クリックするとダウンロードを開始します) --- ダウンロード --- CSVは「,」で区切られたデータですが、タブで区切るように変更することもできます。 サンプルスクリプト 緑の文字が変更箇所で、赤い文字が対応するPHPです。 <!-- -->内または//以下はコメントです。削除しても影響ありません。 必要な箇所をコピー＆貼り付けして編集してください。 → データベースをCSV形式でダウンロード <?php header("Content-Type: application/octet-stream"); ?> <?php header("Content-Disposition: attachment; filename=output.csv"); ?> <?php
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
JMeter簡易リファレンス
Windows PowerShell の機能
CSVファイルフォーマットの解説：CodeZine