[Ruby]Base64エンコードされたデータをSCPでアップロードする - Qiita
概要 API経由でBase64エンコードされたデータを、指定サーバにアップロードするようなケースを想定してます。 必須Gem net-scp # coding: utf-8 require 'tempfile' require 'net/scp' require 'base64' contents = Base64.encode64("contents") save_path = "/var/tmp/test.txt" host = "localhost" user = "username" password = "" Tempfile.create("upload") do |tf| tf.binmode tf.write(Base64.decode64(contents)) tf.rewind file_size = tf.size Net::SCP.start(host, user,
![[Ruby]Base64エンコードされたデータをSCPでアップロードする - Qiita](https://cdn-ak-scissors.b.st-hatena.com/image/square/2a75c388ff74f66c343f410b25d5d0b798b4ce3c/height=288;version=1;width=512/https%3A%2F%2Fqiita-user-contents.imgix.net%2Fhttps%253A%252F%252Fcdn.qiita.com%252Fassets%252Fpublic%252Farticle-ogp-background-9f5428127621718a910c8b63951390ad.png%3Fixlib%3Drb-4.0.0%26w%3D1200%26mark64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTkxNiZoPTMzNiZ0eHQ9JTVCUnVieSU1REJhc2U2NCVFMyU4MiVBOCVFMyU4MyVCMyVFMyU4MiVCMyVFMyU4MyVCQyVFMyU4MyU4OSVFMyU4MSU5NSVFMyU4MiU4QyVFMyU4MSU5RiVFMyU4MyU4NyVFMyU4MyVCQyVFMyU4MiVCRiVFMyU4MiU5MlNDUCVFMyU4MSVBNyVFMyU4MiVBMiVFMyU4MyU4MyVFMyU4MyU5NyVFMyU4MyVBRCVFMyU4MyVCQyVFMyU4MyU4OSVFMyU4MSU5OSVFMyU4MiU4QiZ0eHQtY29sb3I9JTIzMjEyMTIxJnR4dC1mb250PUhpcmFnaW5vJTIwU2FucyUyMFc2JnR4dC1zaXplPTU2JnR4dC1jbGlwPWVsbGlwc2lzJnR4dC1hbGlnbj1sZWZ0JTJDdG9wJnM9OWQ2YzJiNmVmODM0NGNmY2ZiYzBkZDZiNDRlZGZiYzQ%26mark-x%3D142%26mark-y%3D112%26blend64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTYxNiZ0eHQ9JTQwdGFuaXNoLWtyJnR4dC1jb2xvcj0lMjMyMTIxMjEmdHh0LWZvbnQ9SGlyYWdpbm8lMjBTYW5zJTIwVzYmdHh0LXNpemU9MzYmdHh0LWFsaWduPWxlZnQlMkN0b3Amcz1iNjIxZGM3NzllNTM3ZjQzYTVjOWYyNWJmMmY4MTEzOQ%26blend-x%3D142%26blend-y%3D491%26blend-mode%3Dnormal%26s%3Df71cc9cdb7311c8a9409f282be7e42fb)
bigqueryで大量データ処理する時のオプション - Qiita
業務で一部のログはbigqueryに保存しているんですが、少量のデータならWebUI上でサクッと取得ができるのですが、大量データとなるとコマンドライン上でバッチジョブを動かす必要があり、そのオプションをいつも忘れるので、備忘録として残しておきます allow_large_resultsとdestination_table クエリ結果が最大レスポンスサイズを超える場合に、--allow_large_resultsを指定し、--destination_table + テーブル名で結果セットの保管先を指定します。 $ bq query --destination_table '[DATASET].[TABLE_NAME]' --allow_large_results "[QUERY]" バッチクエリを利用する --batchを指定することで、バッチジョブとして、クエリを実行します 上記を組み合わ
Rubyやってます、(`・ω・´)ｷﾘｯ という為に押さえときたいテクニック - Qiita
最近、スタートアップ系や新規開発でRuby(Ruby on Rails)を採用するところも増えてきており、Rubyやってる人がちらほら増えてきた感があるのですが、たま〜にRubyやってて何故それ知らないんだという事もたまにあり、Rubyやってます(`・ω・´)ｷﾘｯ とそれでよく言えるなと呆れる事もありました。。。 そこで、少なくともこれは押さえておいて欲しいテクニックを紹介したいと思います。 クラスメソッド、インスタンスメソッド ★★★★★ これはテクニックではないですが、Rubyで最初に躓いたり、混乱する元の一つなので、Rubyをやっている以上、ちゃんと理解しておくべきことであると思ってます * 定義したClassから見た表 名称 説明
RailsのAPIをswaggerでドキュメント化してみる - Qiita
最近Railsを使用してAPIを作成することが多いのですが、静的にドキュメントにリクエストパラメータが〇〇で、レスポンスが□□で...の用に書くのがたるくなってきたので、何か良いツールが無いかと探していた所、Swaggerというツールを見つけました。 Swaggerについて 公式サイト APIのパス、説明、リクエストパラメータ、レスポンス等を記述したJSONファイルを、Swaggerを使用することで、Web上で、インタラクティブにRestfulAPIの動作確認も行えるOSSです。 現行バージョンは2.0で、こちらについては、Web上でymlを記載するだけで生成してくれるエディターが存在します。 Railsで作成したAPIに対してSwaggerを使用する RailsでSwaggerのJSONを生成する場合、いくつかの方法があります。 grape-swaggerというgemでgrapeの記法で
Scalaのざっくり入門 - Qiita
関数型のメリット 副作用の排除 副作用とは ある機能がコンピューターの(論理的な)状態を変化させ、それ以降で得られる結果に影響をあたえることをいう 変数への値の代入 データ構造を直接変更する オブジェクトのフィールドを設定する 例外をスローする、またはエラーで停止する コンソールに出力する、ユーザ入力を読み取る ファイルを読み取る、ファイルに書き込む 画面上に描画する 純粋関数 副作用を持たない関数 メリット 宣言的な記述なため、簡潔に書けることが多く、関数の仕様を理解しやすい 副作用がないため、形式的な証明がし易い 関数の評価結果がコンテキストに依存しないため、テストがし易い コンテキストに影響を与えないため、関数を組み合わせて利用しても相互に影響しない インストール scalaenvを使ったインストール scalaenvのインストール $ git clone git://github.
[ActiveRecord]activerecord-import-0.15系で気をつけること - Qiita
最近DBのBulk Insert用に、activerecord-importを使用してるのですが、Rails5対応で最新版のactiverecord-importにupdateし使用したところ、思いがけないところでハマってしまったので、備忘録として残しておきます ハマってた内容 Insert用に用意したActiveRecordのModelインスタンス数とimport後のレコード数に差分が生じていた 原因 0.15系だとvalidationがデフォルトでtrueの状態になっており、validationで引っかかっていることに気づかなかった 対策 optionにfalseを渡すのも考えたが、validation通ってないデータが保存されるべきデータではないので、エラーメッセージ等、補足できないかなと調べた どうやらreturn instanceに以下のものがあるっぽい failed_insta
![[ActiveRecord]activerecord-import-0.15系で気をつけること - Qiita](https://cdn-ak-scissors.b.st-hatena.com/image/square/05a3826baf79f4d55dbbe56b2e40a1a5c9f02983/height=288;version=1;width=512/https%3A%2F%2Fqiita-user-contents.imgix.net%2Fhttps%253A%252F%252Fcdn.qiita.com%252Fassets%252Fpublic%252Farticle-ogp-background-9f5428127621718a910c8b63951390ad.png%3Fixlib%3Drb-4.0.0%26w%3D1200%26mark64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTkxNiZoPTMzNiZ0eHQ9JTVCQWN0aXZlUmVjb3JkJTVEYWN0aXZlcmVjb3JkLWltcG9ydC0wLjE1JUU3JUIzJUJCJUUzJTgxJUE3JUU2JUIwJTk3JUUzJTgyJTkyJUUzJTgxJUE0JUUzJTgxJTkxJUUzJTgyJThCJUUzJTgxJTkzJUUzJTgxJUE4JnR4dC1jb2xvcj0lMjMyMTIxMjEmdHh0LWZvbnQ9SGlyYWdpbm8lMjBTYW5zJTIwVzYmdHh0LXNpemU9NTYmdHh0LWNsaXA9ZWxsaXBzaXMmdHh0LWFsaWduPWxlZnQlMkN0b3Amcz0xYjczMTI3YjZjZWVkNDM3Njk2ZjUyZTY1YmU0MzcwNA%26mark-x%3D142%26mark-y%3D112%26blend64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTYxNiZ0eHQ9JTQwdGFuaXNoLWtyJnR4dC1jb2xvcj0lMjMyMTIxMjEmdHh0LWZvbnQ9SGlyYWdpbm8lMjBTYW5zJTIwVzYmdHh0LXNpemU9MzYmdHh0LWFsaWduPWxlZnQlMkN0b3Amcz1iNjIxZGM3NzllNTM3ZjQzYTVjOWYyNWJmMmY4MTEzOQ%26blend-x%3D142%26blend-y%3D491%26blend-mode%3Dnormal%26s%3Df15c0411449485919775ea78e660cd27)
factory_girlでcustom strategyを作るTips - Qiita
rubyのテスト(rspec)でテストデータを用いるときには、大体factory_girlかfixturesを使うことが多いと思いますが、factory_girlは独自DSLが多く、学習コストがかかりちょっと面倒に思うことが多々ありました。(何度も使うのを辞めようかなと思ったか...) 特にデータ作成時に毎回、FactoryGirl.createを使ってたところ、テストの総合計時間がえらいほど掛かり、これを何とかしなければと思い、いろいろ検討した結果、createを使わず、stubやbuild等で予めモックデータを作成しておいて、activerecord-importを用いてbulk insertしちゃえば、2倍以上insertコストが減らすことが出来ました。 各strategyが何をやってるのか 最新version(4.7)より抜粋 create module FactoryGirl m
Rubocopチートシート - Qiita
Lint Lint::AmbiguousOperator 括弧なしのメソッド呼び出しの最初の引数であいまいな演算子のチェック array = [1, 2, 3] # The `*` is interpreted as a splat operator but it could possibly be # a `*` method invocation (i.e. `do_something.*(array)`). do_something *array # With parentheses, there's no ambiguity. do_something(*array) # This is interpreted as a method invocation with a regexp literal, # but it could possibly be `/` method in
ビッグデータを支える技術 - Qiita
Hadoop 大規模な分散処理を支えるJavaフレームワーク HadoopはGoogleのMapReduce、GFS(Google File System)の技術をベースとして作られた HadoopではMapReduceはそのまま「MapReduce(Hadoop/MapReduce)」、GFSは「HDFS(Hadoop Distributed File System)」という名前でそれぞれ開発・公開されている MapReduce データを「Map処理」、「Reduce処理」の2つの処理で処理するモデル 以下、Hadoop/MapReduceの機能 複数のマシン上にデータとデータを処理するためのプログラムモジュールを配置し、プログラムを並列実行する 複数マシン上で分散実行される処理の順序や優先度の制御 障害時の自動リカバリ 処理状況のステータス管理や監視機能 処理全体のパフォーマンスを向上
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
mysqlのuserログイン時に`ERROR 1524 (HY000): Plugin is not loaded`が出たときの対応法 - Qiita
ansible2系で起こったバグの一部紹介 - Qiita
gitでもっと早く使っておけばよかったコマンド・オプション - Qiita
boot2dockerのイメージからdocker-machineへmigrateする - Qiita
SlackでTravisCIからの通知を受け取る - Qiita