Golangでスクレイピング(Rubyの225倍速) - new_pill’s blog
Go速い。並列処理速い。 rubyの実装だと15分かかっていた処理が4.5秒へ。ヤバすぎるぜGo!! もう、本当にrubyは書きやすいシェルスクリプトぐらいの立ち位置で良いんじゃないかな。 テストデータ作る処理とかだけで。 他はPythonとかGoで書くと良いとおもいましたよ。 スクレイピングはいかに効率を上げるかが重要ですが、Goの並行処理の仕組みは使いやすさも含めてすごい良いです。 ともかく速さは命。 package main /* 実装方針 とりまDB登録とかしちゃうのはやめておいて、 logger作るのはやめておいて JSONから設定読み込んで出力するとか goqueryで一回叩いてみるとか、その辺を2017/06/10はするところまで チャンネルとかデータ構造とかは2017/06/11から少しずつやっていけばよろし。 DB以外の部分はとりあえず出来た。 めっちゃ速いwwww ru
Go事始め (3) | Raccoon Tech Blog [株式会社ラクーンホールディングス 技術戦略部ブログ]
golang 開発の松尾です。 「毎年少なくとも一つの言語を学習する― 言語が異なると、同じ問題でも違った解決方法が採用されます。つまり、いくつかの異なったアプローチを学習することにより、幅広い思考ができるようになるわけです」 （達人プログラマー―システム開発の職人から名匠への道） 怠惰により「Language of the Year」といったペースは果たせていませんが、それでも複数の言語を学ぶ効力はそれなりに知っているつもりです。今年はKotlinあたりが楽しそうだなあと思いつつ。 「Go事始め 」の3回目です。 参照型 前回まででgoには値型と構造体型にそれぞれのポインタ型が用意されていることがわかりました。 goにはさらに「参照型」と呼ばれる特殊な組込型が用意されています。 不正確な表現になりますが単純化するとgoの参照型とは主として「make」を使って作成するデータ構造を参照する型
![Go事始め (3) | Raccoon Tech Blog [株式会社ラクーンホールディングス 技術戦略部ブログ]](https://cdn-ak-scissors.b.st-hatena.com/image/square/8a55a1e51ed8cc38e558377a5db15e9d3db962b1/height=288;version=1;width=512/https%3A%2F%2Ftechblog.raccoon.ne.jp%2Fimg%2Fogp.png)
Go言語と並列処理
Go言語の特徴として挙げられる機能の1つに、「並列処理を書くのが簡単」というものがあります。 そこで今回は、Goにおける並列処理の機能を紹介してから、そもそも現代のコンピューターでどのようにして並列処理が実現されているのかをとりあげます。 複数の仕事を同時に行うとは？ 複数の仕事を行うことを表す言葉には並行と並列の2つがありますが、これらには次のような区別があります。 並行処理（Concurrent） 並行（Concurrent）: CPU数・コア数の限界を超えて複数の仕事を同時に行うこと ほんの少し前まで、コンピューターに搭載されているCPUはコア数が1つしかないものが普通でした。 そのような、今ではもう絶滅危惧種になりつつあるシングルコアのコンピューターであっても、インターネットを見ながらWordとExcelを立ち上げてレポートを書けます。 この場合に大事になるのが並行（Concurr
Goルーチンで並行化する方法: 6秒かかる処理を3秒にしよう - Qiita
まず直列実行するプログラムを書く 1秒待つコマンド 2秒待つコマンド 3秒待つコマンド 上記を順番に実行していくプログラムを main.go の中身を書く。 つまり、合計で6秒かかってしまう。 package main import ( "log" "time" ) func main() { log.Print("started.") // 1秒かかるコマンド log.Print("sleep1 started.") time.Sleep(1 * time.Second) log.Print("sleep1 finished.") // 2秒かかるコマンド log.Print("sleep2 started.") time.Sleep(2 * time.Second) log.Print("sleep2 finished.") // 3秒かかるコマンド log.Print("sleep3
rubyで簡単並列処理（Parallel） - Qiita
list = ["A", "B", "C", "D"] Parallel.each(list, in_thread: 2) do |name| puts name end
parallel と concurrent、並列と並行の違い - 本当は怖いHPC
2017/01/10 誤字脱字を修正しました 2016/11/07 内容を修正しました 2010/09/17 文章を修正しました 一般的に、parallelは並列、concurrentは並行と訳されます。検索してもずばり書かれた物がなかったので、僕なりの理解を書いてみます。 （注：言葉の定義の問題なので、複数の流儀があり得ます。端的に言えば、いわゆるCPUのSIMD命令を「並行」と見なすかどうかに違いが現れます） 参考リンク： http://d.hatena.ne.jp/NyaRuRu/20060129/p2 http://d.hatena.ne.jp/muimy/20070322/1174526368 一番妥当（だと思う）定義 一言で言えば、 Concurrent（並行）は「複数の動作が、論理的に、順不同もしくは同時に起こりうる」こと Parallel（並列）は、「複数の動作が、物理的に
Erlang - Wikipedia
Erlang（アーラン）は、コンピュータにおいて汎用的な用途に使うことができる並行処理指向のオープンソースソフトウェア（英：Open Source Software、略：OSS）プログラミング言語および実行環境。 概要[編集] Erlangの直列処理のサブセットの言語は、関数型言語であり、先行評価を行い、変数への代入は1回限りであり、動的型付けである。 Erlangはエリクソンにより次の条件のシステムを構築できるよう設計された。 分散化された環境 障害に耐性をもつ（IT用語における「フォルトトレラント」（英：Fault tolerant））。 ある程度のリアルタイム性を備える 無停止で稼働する ホットスワップが可能であり、稼働中のシステムを停止すること無くErlangのプログラムを変更することができる。Erlangは、当初はエリクソン社内部だけで使われる非公開の技術であったが、1998年に
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
