AWSのIPリストを取得してCloudFormationで使えるセキュリティグループの定義を出力する(golang編) - でこてっくろぐ ねお
やりたいこと 全世界のAWSのEC2からだけ許可するsecurity groupを作りたいとかそんな感じのやつ それにどれくらいの嬉しさがあるかと言うと、まぁ人それぞれだよね 以下のテンプレート部分を少し変えると、AWS WAFの定義で全世界のAWSのEC2からのアクセスを拒否するとかそういうのにも使えるよね 方法 以下のスクリプト使うとSecurity Groupの定義が一個ペロッと出力されるので後は勝手に使うといいと思います。 最大の問題は、このIPレンジは当然そのうち変わるので、本来はJSONファイルの変更を検知してlambdaを動かして最新の情報に追随させるみたいなことをやる必要があるんですが、まぁ何か雑にやりたい時はこういうのでもいいんじゃないですかね。 ちゃんとやりたい場合は以下クラスメソッドさんのエントリ参照 dev.classmethod.jp プログラム GitHub -
Top 10 Big Data Trends 2017 | Tableau Software
2016 was a landmark year for big data with more organizations storing, processing, and extracting value from data of all forms and sizes. In 2017, systems that support large volumes of both structured and unstructured data will continue to rise. The market will demand platforms that help data custodians govern and secure big data while empowering end users to analyze that data. These systems will
サーバーレスアーキテクチャの最新動向 - こんなにできてしまうAzure Functions - - Qiita
マイクロソフトのサーバーレスアーキテクチャの環境が新しくなりました。 サーバーレスアーキテクチャについて前書きました。 これです。「さーばーれす あーきてくちゃ…？ -Azure Functionsでサーバーレスアーキテクチャが何かを理解する記事」 で、 これは約半年前の状況なのですが、半年を経てだいぶAzure Functionsも変わって超クールになったのでご紹介したいと思います。 そもそも Azure Functionsとは ここで Azure functions の機能的な面を詳しく見ていきましょう。 実際に以下の Azure Functionsのサービスの機能を見ると、 Azure Functionsの機能がいかにサーバー レスアーキテクチャやマイクロサービスアーキテクチャといったアーキテクチャのメリットを享受できるように作られたかがわかると思います。以下に挙げられるようにC#や
アセンブラを混ぜてコンパイルするとスタックが実行可になってしまう話 - Qiita
#include <stdio.h> #include <string.h> int main(){ FILE *fp; fp = fopen("/proc/self/maps", "re"); if (fp != NULL) { char buf[256]; while (fgets(buf, sizeof(buf), fp) != NULL) { if (strstr(buf, "[stack]") != NULL) { puts(buf); } } fclose(fp); } return 0; } [rarul@tina ~]$ gcc -c -o main.o main.c [rarul@tina ~]$ gcc -c -o asm.o asm.S [rarul@tina ~]$ gcc -o stack_exec main.o asm.o [rarul@tina ~]$ ./s
WebDriverManagerを使用してgekcodriverを自動インストール、groovyでgeb実行する - Qiita
WebDriverManagerを使用してgekcodriverを自動インストール、groovyでgeb実行するSeleniumGroovyGeb WebDriverManagerを使用してgeckodriver(SeleniumのWebDriver)を自動インストールする方法 - Qiita GitHub - bonigarcia/webdrivermanager: Automatic Selenium WebDriver binaries management in runtime for Java 上記を見てやってみた。 io.github.bonigarcia:webdrivermanager:1.6.1 を grab する org.openqa.selenium.firefox.FirefoxDriver を import 実行前にドライバ読み込み groovy google_s
itamae | itamae運用に関する備忘録 - Qiita
itamae運用に関する備忘録、本来はドニュメント等にあるはずの事に過ぎないが、必要な時に探すのが面倒なので、自分用にまとめておく。 実行に関して レシピが実行されるのは、未適用の時 説明は不要だと思うが、itamaeを向けて実行した時に、レシピが未適用だったら問答無用に適用される 適用済みのレシピを再度適用させるのは、レシピの内容が変更された時 一度適用されたレシピを、再度itamaeを向けて実行しても、レシピの内容に変更がなければ、適用されない。つまり、何度実行しても、勝手にアップデートがかかるような適用はされない。 レシピの内容が変更されていなくても、関連ファイルの内容が変更されれば、適用される レシピの中で、template等を使用してファイルを配置する場合などでは、レシピが全く変更されていなくても、そのsourceファイルが変更されていれば、適用される。 通常のレシピ適用ではパッ
Consumer-Driven Contract testing in Cookpad - クックパッド開発者ブログ
こんにちは、技術部の taiki45 です。3月17日に ICST 2017 の参加者などを招いたミートアップがあり、そこでクックパッドの開発とテストへの取り組みについてお話をしました。この記事では資料とセッション中に行われた質疑応答を元に、発表についての補足をしたいと思います。このミートアップについては、後日開催報告記事が出る予定です。 今回はクックパッドをご存知ない方に向けて、クックパッドでのテスト領域での取り組みについて紹介しました。そのため、前半部分では後半への橋渡しとして、クックパッドがどういうことに取り組んでいるか、またクックパッドでのソフトウェア開発の規模や様子について俯瞰した視点でお話しました。 特に今回の話では、分散型アーキテクチャを選択した際に起きる問題が主題だったので、チーム構成とシステム構成の面を説明しました。具体的には、事業領域に沿ってチームが分割されていること、
LohacoダッシュボタンをESP8266を使いフルスクラッチで製作してみた - Qiita
できたもの Original dash button with EPS8266 https://t.co/SQnh8a5zlE @YouTubeさんから — nobu_e753 (@nobu_e753) 2017年4月2日 ボタンを押すと設定済みのECサイトで商品を発注(Lohaco) ESP-WROOM-02 + 発注サービスAPI(ECサイト操縦用)にて構成 きっかけ Webサイトのスクレイピング技術およびESP-WROOM-02の基本動作を学ぶため，ボタンを押すと事前に設定したECサイト(Lohaco)のページにアクセス・購入を行うものを製作してみました． 環境 ESP-WROOM-02 モジュール FTDI USBシリアル変換アダプター(ESP-WROOM-02への書き込み用) ブレッドボード用5V/3.3V電源ボード(電源供給用) タクトスイッチ(大) Python 3.5 Se
Microsoft Partner Blog
tag, and before any other scripts. Your first data will appear automatically in just a few seconds. -->
Gitのステージング領域の正体を探る | メルカリエンジニアリング
ソフトウェアエンジニアの @DQNEO です。こんにちは。 Gitの内部構造を深掘りするシリーズ３回目です。 前回までのお話はこちら Gitのつくりかた – Mercari Engineering Blog Gitのコミットハッシュ値は何を元にどうやって生成されているのか – Mercari Engineering Blog 今日はみんなだいすき「ステージング領域」の中身について解説してみます。 ステージング領域とは何か？ 簡単に説明すると「次にコミットしたときにコンテンツとして登録されるもの」リストです。(別名「インデックス」ともいいます。) このリストは、 git addやgit rmしたときに書き換わります。 (古くはcacheと呼ばれていました。内部実装やgit diff --cachedに今もその名残があります。) git addのマニュアルに説明があります。 Git – git
「サーバが出来ていない？ 俺なら3分でモックを用意できるよ。」というために。 - Qiita
はじめに フロントエンドを作っていたり他サーバと連携するバックエンドを作っていると、対向サーバが出来るまでダミーのモックサーバが欲しくなりますよね。 適当に固定のダミーデータを返すだけで良いのですが、本来の開発以外のところに工数を取られるのは嫌なものです。 探してみると色々なモックサーバがあるのですが、好みに合うものが見つからなかったので作ってみました。 欲しかった機能： レスポンスヘッダを設定できる。 レスポンスを簡単に切り替えることが出来る。 リクエスト、レスポンスの内容を確認することができる。 (あると嬉しい) リクエスト内容によってレスポンスを切り替えることが出来る。 instant-mock 使い方 作ったモックサーバはこちらです。 https://github.com/arenahito/instant-mock 細かい説明は後にして、まずは動かしてみます。 Node.js 製
Visual Studio Code で UML を描こう！ - Qiita
この記事では、Windows 環境に Visual Studio Code と PlantUML をセットアップする手順を説明します。 PlantUML とは PlantUML は、以下のような図をテキストで素早く描くためのオープンソースプロジェクトです。 シーケンス図 / Sequence diagram ユースケース図 / Usecase diagram クラス図 / Class diagram アクティビティ図 / Activity diagram コンポーネント図 / Component diagram 状態遷移図 / State diagram オブジェクト図 / Object diagram 環境 下記の環境で動作確認しました。 Windows 10 Pro (64bit) Visual Studio Code 1.11 Java SE Runtime Environment
Atomでフロー図っぽいのを書く - Qiita
きっかけ ちょっと大きな規模の開発になった時に、頭がおかしくなりそうになったので一旦アウトプットしようということで ドローイングツールを探してたら普段利用しているエディタのAtomでUMLっぽいの書けるじゃんということになりました。 導入ツール 説明不要のエディターですね => https://atom.io/ plantuml-viewer atomプラグインのplantuml-viewerを使用します。 使用するのに java Graphviz が必要とのこと。下記の記事が詳しいです。 参考: テキスト入力でUMLをライブプレビューしてくれるツール（plantuml-viewer:Atomプラグイン） - Qiita language-plantuml PlantUMLのサポート用に上記のatomプラグインも入れました。 使ってみる PlantUML - シーケンス図 | プログラマー
javascriptとhtmlだけ5分で作れるチャット！ - Qiita
本記事で記載しているMilkcocoaは2019年10月30日にサービスが終了するので、firebaseを使用することをお勧めします。 【続】javascriptとhtmlだけ5分で作れるチャット！+ Firebaseを使ってWeb上に公開しちゃおう！ 前書き esa.ioで社内向けに書いたものをこちらに移転。 自身が配属になった案件でチャット機能が使われていたが、よくわからなかったので理解を深めるためになにか作ってみることにした。 リアルタイムデータベースを使おう！ 通常チャットのようなものを作る場合、フロントだけで作るというのはほぼ無理（もどきならいけるかな？） ・サーバーで相手からの通信を確認し別の人に送る。 ・トーク内容をデータベースに保存してor取り出して のような処理を自前で作らなきゃいけない、、、 そこで使うのがリアルタイムデータベースことMilkcocoa(ミルクココア)で
仕様書の書き方 - Qiita
仕様書を書く上で必要かなと思うことをまとめてみた。 対象者は、まだ仕様書なんて書いたことないよとか、何書くかいつも悩む、という方。 ここでいう仕様書とは、開発前の設計書というよりは、運用フェーズに引き渡す前に用意しておいたほうがよいドキュメント、という位置づけ。 仕様書の目的 仕様書を書く目的は、新しい人がチームに来た時に、スムーズに業務に取り組めること。 また、「人は時間が経つと必ず忘れる」ので、将来の自分のためでもある。 大事なこと 仕様書の目的を明確にする。 あれもこれも、と情報をたくさんのせても混乱する。 「仕様書にもメンテナンスコストがかかる」ことに注意する。 仕様書は正しい日本語で書く。 主語をきちんと入れることが大事(〜のつもりで書いた、というのは知らない人には伝わらない)。 情報は多すぎず、少なすぎず。 条件について場合分けして整理したり、図を用いたりすると良い。 前提と制
Code Health: Google's Internal Code Quality Efforts
You started off by saying that in most organizations there's a dedicated team of engineers (usually tech leads or seniors) who use their free time or a committee to oversee initiatives and guidelines to propagate best practices. From the way the article is written it sounds like you're saying you do something else, but you're example of having 20%ers doing this seems the same as "free time" to me.
AWSとGCPのマルチクラウドインフラ検証の進め方
今回はGCPでの検証を行った際の進め方について説明していきます。インフラを作り込みすぎずに検証したことで、早めに想定外のボトルネックに気
数理脳科学の世界的権威 甘利俊一に聞いた第三次AIブームに「足りていないモノ」 | Ledge.ai
サインインした状態で「いいね」を押すと、マイページの 「いいね履歴」に一覧として保存されていくので、 再度読みたくなった時や、あとでじっくり読みたいときに便利です。
Linuxリソースの監視・確認に関するコマンド逆引きメモ - Qiita
# free total used free shared buffers cached Mem: 1026876 974072 52804 0 202656 348008 -/+ buffers/cache: 423408 603468 Swap: 2048276 92 2048184 ここで注意なのは、Linuxは空きメモリをbufferとcacheとして使用するので、 一見freeは少ない(上記の場合52M)と思われがちだが、実際にはbuffer+cacheとして確保されている(上記の場合600M確保されている) ディスクの空き容量が知りたい。 dfで確認可能。基本ですね。 [root@localhost /]# df /dev/mapper/VolGroup-lv_root 12941636 1851304 10432924 16% / Filesystem 1K-blocks U
『備忘録』ESP-WROOM-32を使って例のボタン的なのを作る -プリント基板編- - Qiita
#はじめに 仕事で例のボタン的なデバイスを一から作る機会があったので、最近市場に出回ってきたWifi&Bleモジュール、ESP32(ESP-WROOM-02の上位バージョン)を使ってプリント基板を製造した話をします。 無理やりひとまとめにしたので、結構長くなってしまいました、、、 ESP32は技適に通っており、国内で電波ゆんゆんしても怒られません。 さらにWifiとBle、両方使用することができるので、 BLEでスマホに接続→スマホからWifiのSSIDやパスワードを保存させる といったようなシチュエーションには最適のモジュールです。 *一応Arduino用のコンパイラもありますが、現状bleとwifiを使用するには専用の開発環境でC++をコンパイルする必要があります。 **しかも700円！**これは買わない理由がないですね。 詳しい開発環境等については@rukihena 様のこちらの記事
deep learning にも使える scikit-learn の概要と便利な機能 - Qiita
scikit-learn: pythonの機械学習ライブラリ。deep learningそのものの構築はないけど、評価メトリクスやハイパーパラメータ探索に便利なAPIがあります。 インストール from sklearn.tree import DecisionTreeClassifier from sklearn.model_selection import GridSearchCV from sklearn.metrics import accuracy_score # 0. データ読み込み from sklearn.datasets import load_iris iris = load_iris() X_train, X_test = iris.data[:120], iris.data[120:] y_train, y_test = iris.target[:120], iris
システム発注側の愚痴
朝も早くから目が覚めたので、出社前に愚痴っとく。 当方のスペックは ・30代、化学系メーカに勤務。 ・大学での専攻は情報系ではない。パソコンは趣味でいじってきた。 1. SIerへの思い ・毎回、見積もりの度に「何人月ですか？」と聞くが、聞いてる私だって無意味な質問だと思ってるよ。 すまん、私の説明が悪すぎるのか、こっちの決裁権者は上から下まで人月でしか理解できないんだよ。 妥当かどうかはわからんけど、例えばソースの行数単価とか、プログラムの容量単価とかで説明したこともある。「訳がわからないから、やっぱり人月で表現してくれ」と言われたがな。 ・要求する機能に対して短い納期を設定しているが、「なんとかします」って言ってくれてありがとう。無理をねじ込んでごめん。 私にはお金関係を決裁する権限もなければ給料も安いから、ありがとう、ごめんと言うしかできない。 ・毎年「保守費、下がりませんか？」とお
RSpecで遅いテストを見つける - すがブロ
--profile オプションを使う 普段きちんとRSpecを使っている人にとっては常識なのかもしれません。というか普通にhelpに載っているので常識なのでしょう、、、。 RSpecで遅いテストを見つけるには、--profile オプションを使うと簡単に見つけることができます。 % bundle exec rspec --profile 3 .................................. Top 3 slowest examples (4.24 seconds, 61.5% of total time): Pooka Pooka::Master Worker#run worker received usr1 signal(signal_handler_thread Error) 1.41 seconds ./spec/pooka_spec.rb:86 Pooka Po
MySQLのfilesortは何ソートで行われているのか - $shibayu36->blog;
最近、CourseraのArgorithms, Part1という講義を受けている。そこでソートの講義を受けて、そういえばMySQLのORDER BYでfilesortになったときってどのソートが使われているのだろうと気になってきたので調べてみた。 調べてみると非常に難解で、結局いまいち分からなかったが、今の段階の調べた内容をひとまず書いておく。MySQLのコードを読んだのも初めてで、しかもちゃんと読み解くことができなかったので、情報が間違っている可能性も非常に高い。間違ってたら指摘してもらえるとうれしいです。 調査結果 最初に調査結果を書いておく。たぶんこれは非常に単純化したもので、詳しく見るともっといろいろチューニングされてそう。 sort_buffer_size以内のメモリ量でソートが可能な場合、メモリ内でのみソートされる ソートにsort_buffer_size以上のメモリが必要な場
家電会議 - NASから消去したファイルを復元
2019年12月12日追記：家電会議を終了しました。ご利用いただいた皆様、ありがとうございました。 2016年9月8日にサービスを開始して以来、ユーザーの皆さまにご利用、ご愛用いただいてきた「家電会議」ですが、2019年12月12日をもちまして終了させていただきます。また、これに伴い、ソニーホームエンタテインメント＆サウンドプロダクツ株式会社が運営するVideo & TV SideViewに、家電会議の一部ページを利用し提供していた「話題のTVニュース」枠も終了します。ご利用いただいているユーザーの皆さま、大変申し訳ございません。深くお詫びいたします。 家電会議は、はてなブックマークの機能や膨大なブックマークデータを活用し、機械学習などを用いながら家電やエンターテイメント情報に特化した実験的なサイトでした。これらのページについては、2019年12月12日以降はご利用いただけなくなります。た
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
3分でわかるAzureでのService Principal
cookbook timezone CHANGELOG
GitHub · google/yapf: A formatter for Python files
Introducing tf-seq2seq: An Open Source Sequence-to-Sequence Framework in TensorF
長文日記