タグ

2017年8月15日のブックマーク (7件)

  • AWSのS3のデータを集計する - Qiita

    S3は簡単に言うとAWSのクラウドストレージサービスであり、大量にデータを保存することができます。 ・Amazon S3 とは何ですか? http://docs.aws.amazon.com/ja_jp/AmazonS3/latest/dev/Welcome.html 今回S3上のデータを集計してグラフにして表示する必要があったため、それについてのスクリプトについて説明します。 作業環境: macOS Sierra バージョン10.12.5 Python 2.7.10 boto まずPythonからAWSにアクセスするためにbotoを使う必要があります。 最新バージョンはboto3なのでboto3をインストール。

    AWSのS3のデータを集計する - Qiita
    yatta47
    yatta47 2017/08/15
    Pythonグラフライブラリが参考になる。
  • AWS Glue – 一般提供開始 | Amazon Web Services

    Amazon Web Services ブログ AWS Glue – 一般提供開始 日、AWS Glue の一般提供開始がアナウンスされました。Glue はフルマネージドでサーバレス、そして、クラウド最適化された ETL(extract, transform, load) サービスです。Glue は他の ETL サービスやプラットフォームと、いくつかのとても重要な点で違いがあります。第1に、Glue はサーバレスです — リソースのプロビジョニングや管理を行う必要はありません。ジョブ、もしくは、クローリングを実行している間に Glue が使用したリソースに対する支払いのみで利用可能です(分単位課金) 。第2に、Glue のクローラです。 Glue のクローラは、複数のデータソース、データタイプ、そして、様々な種類のパーティションを跨いで、スキーマを自動的に検出・推測することができます。ク

    AWS Glue – 一般提供開始 | Amazon Web Services
    yatta47
    yatta47 2017/08/15
  • ライバルサイトの分析に最強なSEOツール「SEO Rival Checker」開発しました!! - ITWeber

    どうもIT大好きFwwwです。 久しぶりにはてなで記事を書かせていただきます。 今回はMacBookチルドレン仲間のたくちゃむ君(@saimedhi)とライバルサイトの分析に利用できる最強なSEOツール「SEO Rival Checker」を開発しましたよ!! ※PC推奨です。 SEO Rival Checkerってなに?? SEO Rival Checkerはその名の通りライバルサイトの分析に利用できるSEOツールです。 当初はWordpressのプラグインという形で配布しようと考えていたのですが、多くの方に利用していただきたいためにウェブサービスとしてリリースいたしました。 このSEO Rival Checkerではキーワードから検索順位1位から10位(または1位から20位)のサイトを分析することができます。 出力する情報は、 タイトル URL ディスクリプション H1 H2 H3 H

    ライバルサイトの分析に最強なSEOツール「SEO Rival Checker」開発しました!! - ITWeber
    yatta47
    yatta47 2017/08/15
    これは便利だ。っていうかめっちゃ動き早いな。どうやっているんだろう。裏側も知りたい。
  • selenium + phantomjsで検索結果が文字化けする - /var/www/yatta47.log

    URLエンコードでハマったので備忘録。 やりたかったのはseleniumとphantomjsを使ってGoogleにアクセスして、結果のURLだけリスト表示したいというのが事の発端。その時に日語が結果(というかタイトル)としてうまく出力されない事象が発生しました。selenuimとはブラウザオートメーションツール。phantomjsはヘッドレスブラウザ。 使用する言語はRubyです。 調べてみたら原因は初歩的なミスでした。 ????で表示される ハマった内容というのは、結果が以下のように????(クエスチョンマーク)で表示されるというもの。 $ ruby main.rb ????? - Google 検索 これを文字化けというのかどうか・・・はおいておいて、とりあえず見れる形で表示されていないのは問題。 おそらく、phantomjsを使っているので、そこで言語設定とかをちゃんとしてあげれば

    selenium + phantomjsで検索結果が文字化けする - /var/www/yatta47.log
    yatta47
    yatta47 2017/08/15
  • rmagickのインストールにハマった - Qiita

    同じような解決策が色んな所で見つかるが罠 エラーで調べると、環境変数をゴニョゴニョしているものが多いが全く解決しない ヘッダファイルが読めない→環境変数だろう→色んな人が環境変数で直ったって言ってる!→なんとかなりそう!という感じで無駄な時間を費やす pkg-configとか何度もインストールし直しても駄目 バージョンが合わないことに全く気づかず rmagickは 2.16.0 でも、imagemagick 7系に対応していない! imagemagickの6系をインストールして解決できた HomebrewのFomulaの古いバージョンを入れる方法が、バージョン1から代わった brew versions って書いてあるドキュメントは全部使えない 解決した方法 色んな所を見ながら探していたら、Googleの検索結果に、以下の情報を発見 RMagick 2.16.0 の時点では ImageMag

    rmagickのインストールにハマった - Qiita
    yatta47
    yatta47 2017/08/15
  • RubyのRMagickで縦横比固定でリサイズしたり切り抜いたり - アインシュタインの電話番号

    縦横比固定でリサイズする場合は、resize_to_fitメソッドを使う。縦か横のどちらか小さい方のサイズでリサイズされる。残ったもう一方は、比率を保ったままリサイズされる。 require 'rubygems' require 'RMagick' # 元画像の画像サイズは1024x768 original = Magick::Image.read('target.jpg').first image = original.resize_to_fit(1024, 120) image.write('resize_to_fit1.jpg') #=> 160x120にリサイズされる image = original.resize_to_fit(120, 768) image.write('resize_to_fit2.jpg') #=> 120x90にリサイズされる 画像の一部を切り抜く 画像の

    RubyのRMagickで縦横比固定でリサイズしたり切り抜いたり - アインシュタインの電話番号
    yatta47
    yatta47 2017/08/15
    rmagickの使い方
  • ubuntu で RMagick を bundle install しようとしたらエラーがでた! - Qiita

    今更だけど、rubyでRMagickを使いたくて rubygemsからインストールしようとしました。 ubuntu 12.04 ruby2.1.0 するとこんなエラーが・・・ ERROR: Error installing rmagick: ERROR: Failed to build gem native extension. /usr/bin/ruby1.8 extconf.rb checking for Ruby version >= 1.8.5... yes checking for gcc... yes checking for Magick-config... yes checking for ImageMagick version >= 6.4.9... yes checking for HDRI disabled version of ImageMagick... yes

    ubuntu で RMagick を bundle install しようとしたらエラーがでた! - Qiita
    yatta47
    yatta47 2017/08/15
    imagemagickのヘッダファイルとかのインストール方法