2016/06/15に、トレジャーデータがオープンソースとして公開したワークフローエンジンDigdagのリンク集です。内容は随時更新します。またトレジャーデータではDigdagを自社でTreasure Workflowとして提供しています。こちらの情報も収集しています。 変更内容が気になる方は変更履歴をご覧ください。 1. 開催されるイベント 2. オフィシャルページ オフィシャルページ ソースリポジトリ 3. チュートリアル Getting started (英語) Treasure Data社のOSSワークフローエンジン『Digdag』を試してみた #digdag (日本語) Digdag 入門 Digdagのアーキテクチャとコンセプトを理解する Treasure Workflow for ビギナー 環境構築編 digファイル書き方編 Digdag公式ドキュメントからDigdagを学ぶ
みんなの仕事場 > オフィス家具の選び方 > 世界に通用するものづくり!岡村製作所 オフィスチェア「サブリナ(Sabrina)」の魅力を探る [その1] (注) 2018年4月1日に「株式会社岡村製作所」から「株式会社オカムラ」に社名変更している。 ■高級オフィスチェアの世界 高機能でありながら、デザイン性の高い、高級オフィスチェアというと、日本ではアーロンチェアを思い浮かべる人も多いだろう。アーロンチェアを製造するハーマンミラー社は、ミシガン州に本社を置くアメリカの大手オフィス家具メーカーだ。 安価な中国製が世界を席巻する時代ではあるが、高級オフィスチェアの世界では、ハーマンミラー社以外にも、アメリカのヘイワース社、スチールケース社、ドイツのウィルクハーン社、スイスのヴィトラ社、ジロフレックス社など、アメリカやヨーロッパに本拠を置くメーカーが、デザイン性と機能性を誇る製品を競っていて、そ
エンジニア視点で説明する「メルカリ」、リリースから4年の道のり:特集:情シスに求められる「SRE」という新たな役割(4)(1/2 ページ) 2017年6月、執行役員 Chief Business Officer(CBO)に、元Facebookのバイスプレジデント ジョン・ラーゲリン氏を迎えるなど、国内はもちろんグローバル展開も加速させているメルカリ。世界に支持される同社サービスはどのように作られ、支えられているのか?――2017年9月に開催された技術カンファレンス「Mercari Tech Conf 2017」にサービス開発・運用の舞台裏を探った。 フリマアプリを開発・提供するメルカリは、「Go Bold(大胆にやろう)」「All for One(全ては成功のために)」「Be Professional(プロフェッショナルであれ)」という3つのバリューを掲げ、急成長を遂げてきた。では、開発や
PythonはAIブームなどの影響もあり、現在その需要を急速に高めているプログラミング言語です。 プログラミング言語別の平均年収でもPealやRubyを抑えて1位を記録していることからも、企業が高いお金を払ってでも扱えるプログラマーやエンジニアを手に入れたいと思っていることが分かります。 今回はこれからの転職にオススメなPythonのプログラマー・エンジニアの平均年収が高い理由と今後の需要についてご説明します。 求人検索エンジンのスタンバイを運営しているビズリーチが発表したプログラミング言語別の平均年収ランキングでは、Pythonが1位を記録しています。 Pythonの平均年収は約651万円 ビズリーチが発表したPythonプログラマー・エンジニアの平均年収は651万円です。 続く2位はPerlで633万円、3位はRubyで606万円ですので、大きく差が開いていることがわかります。 中には
We are pleased to announce that Application Auto Scaling now supports scheduled scaling, which makes it possible to scale resources at specific preset times or intervals. Application Auto Scaling allows you to automatically scale resources for AWS services beyond Amazon EC2, including Amazon ECS, Amazon EC2 Spot Fleets, Amazon EMR Clusters, AppStream 2.0 fleets, and Amazon DynamoDB. Scheduled scal
印刷する メールで送る テキスト HTML 電子書籍 PDF ダウンロード テキスト 電子書籍 PDF クリップした記事をMyページから読むことができます Amazon Web Services(AWS)は米国時間11月6日、クラウドストレージサービス「Amazon Simple Storage Service」(Amazon S3)に新たなセキュリティ機能と暗号化機能を追加したと発表した。これらの新機能は追加料金なしで利用可能となっている。 追加された機能は以下の5つだ。 デフォルトでの暗号化:ユーザーは、バケットポリシーを用いた暗号化設定を利用することで、暗号化されていないオブジェクトをAmazon S3に引き渡した際に、指定した手法によって自動的にオブジェクトを暗号化できるようになった。 権限のチェック:Amazon S3コンソールにおいて、どのS3バケットに対するアクセスが公開され
Amazon Web Services ブログ 見逃していませんか? 最近公開された AWS サービスの概要 目を疑うほどの数のリリースやクラウドの最新技術が開発されています。今回のブログでは、この夏から秋の終わりまでにリリースされた優れたサービスや機能の近況報告の概要を紹介します。 今回ご紹介するサービスと機能: RDS MySQL と Amazon Aurora で行うデータベースユーザー認証の AWS IAM Amazon SES 評価ダッシュボード Amazon SES オープンおよびクリックのトラッキングメトリクス ソリューションビルダーチームによるサーバーレスイメージハンドラ ソリューションビルダーチームによる AWS Ops Automator では、詳しい内容を見てみましょう。 RDS MySQL と Amazon Aurora で行うデータベースユーザー認証の AWS I
2017-11-09「フロントエンド開発に再入門する」タスクフォースの進め方こんにちは。開発本部の宍戸です。 メドレーでは定期的に、テーマに沿って組織の技術的な底上げを行うための機会(タスクフォースと呼んでいます)を行っています。そのタスクフォースの1つとして先日、フロントエンド開発力のベースアップを目的としたタスクフォースを行いました。本記事では、その取組みについてご紹介したいと思います。 背景メドレーには現在 20 人弱のエンジニアが在籍しており、その約半数がサーバーサイド出身者です。また普段の開発においては、一つの機能をフロントからサーバーサイドまで一貫して一人が担当するケースが多くあります。サーバーサイド出身者のフロントエンド開発のスキルセットには多少ばらつきはあるものの、普段の開発業務ではレビュー等でそれぞれサポートしつつ開発を行っています。 しかし、フロントエンドの基礎的な部分
こんにちは、ひろかずです。 5/22にトレンドマイクロさんで開催されたSecurity-JAWS#5に行ってきましたので、一筆書きます。 月曜に関わらず、盛況な集まりでした。 お品書き Session1:トレンドマイクロ株式会社 姜 貴日さん「Deep SecurityとAWS WAF、SNS、Lambdaを使ってうまいこと自動防御する」 Session2:三井物産セキュアディレクション株式会社 大橋 和正さん「インシデント別対策から見るセキュリティ運用体制〜Alert Logicのことも少し〜」 Session3:エフセキュア株式会社 河野 真一郎さん「脆弱性について疑似クラッキング(デモ)をやってみる ~脆弱性対策はとても大切。でも多くの人はそれに気づかないんだ〜」 Session4:洲崎さん「AWS使って社内CTFを開催してみた」 Session1:「Deep SecurityとAW
JSON を整形してから diff をとる tool、diff-with-json を作った。 github.com JSON を jq command に通して整形し、colordiff が在れば其れを、無ければ diff を使って差分を表示する。 次の a1.json と a2.json が在ったとしやう。 // a1.json { "m": 42, "n": 57 } // a2.json { "m": 42, "n": "parrot" } .n を 57 から"parrot"に変へたものだ。此れを diff で diff -u -L a1.json -L a2.json a1.json a2.json として差分を出すと斯う成って了ふ。 --- a1.json +++ a2.json @@ -1 +1 @@ -{"m":42,"n":57} +{"m":42,"n":"parro
日本人と外国人との結婚では同姓か別姓かを選べるのに、日本人同士の結婚だと選択できないのは「法の下の平等」を定めた憲法に反するとして、東証1部上場のソフトウエア開発会社「サイボウズ」(東京都中央区)の青野慶久社長(46)ら2人が、国に計220万円の損害賠償を求め、来春にも東京地裁に提訴する方針を固めた。代理人弁護士によると、法律婚した男性による夫婦別姓訴訟は初めて。 青野さんは、旧姓の「青野」で経営者としての信頼を築き、サイボウズは2000年に東証マザーズ上場。翌01年の結婚時に妻の姓を選択してからも旧姓を通称として使ってきた。しかし、所有していた株式の名義を戸籍上の姓に書き換えるのに約81万円を要した。「働き方が多様になった方が働きやすくなるのと同じで、姓も選択できる方が生きやすさにつながるはず」と訴える。
今回は、↓の記事のシリーズです www.itjigoku.com www.itjigoku.com 毎日終電、泊り込み、休日出勤、パワハラが横行してる某大手キャリア案件の話です これまでは、このブログの筆者、漆うしるの体験談でしたが、 今回は、他の人の身に降りかかった災難を取り上げようと思います 次々辞めていく古株作業員たち この案件がカオスと化す(元請け会社と派遣先会社の間に大手SIerが割り込んできた)前に作業員の4分の1が辞めていきましたが、カオスと化してから1ヵ月経ってから、更に3分の1の人が辞めていきました。 その中でも仲良かったある人と話す機会があり、その人はこう言っていました。 「8ヶ月以上我慢してきたけどもう限界。自社に言って辞めさせてもらった。」 当然と言えば当然ですね。 毎日終電・泊り込み・休日出勤が当たり前のこの案件で辞めたいと思うのは当然です。 ちなみに、私も自社に
私たちは普段、お店でものを買う際には必ず「お金を払う」ということを行っています。現金やクレジットカード、交通系電子マネーに加え、最近ではApple Payなどのスマートフォンによる電子決済サービスも登場しています。そのような新しい決済サービスを使ったことがあるという方も増えてきているのではないでしょうか。 このブログでも度々注目されているお金とデザインのこと。先日起こった私の実体験を通して、このような「お金を払う」という体験のデザインについて考えてみたいと思います。 とあるコーヒーショップでの体験談:フィードバックの勘違い これは、とあるコーヒーショップでバーコード決済アプリを利用した際に体験した実話です。 さて、3コマ目で私はなぜ「会計が終わったな」と勘違いしてしまったのでしょう? 振り返ってみると、会計時に私はこんなことを考えていました。 1コマ目:「電子決済アプリで支払いたい」 2コ
VPCエンドポイントの方式 ゲートウェイVPCエンドポイント(既存方式) VPCエンドポイントは、今までS3とDynamoDBが対応していました。仕組みは下図のようにVPCのルートテーブルを書き換えてインターネットゲートウェイでなくVPCエンドポイントのゲートウェイ経由でAWSのAPIエンドポイントへアクセスしていました。今回この方式はゲートウェイVPCエンドポイントと呼ばれるようになりました。ゲートウェイVPCエンドポイントではAWSのAPIへはパブリックIPへ向いており、アクセス制御はゲートウェイのアクセスポリシーで行います。 インターフェイスVPCエンドポイント(新方式) 今回追加されたものは、下図のようにサービスのエンドポイントとENIをPrivateLinkと呼ばれるものでリンクされます。DNSを使ってENIのプライベートIPに<サービス名>.<リージョン>
IT Leaders トップ > 経営課題一覧 > データ活用 > インタビュー > 分析経験ゼロから、NTTぷららがデータサイエンスチームを立ち上げた理由 データ活用 データ活用記事一覧へ [インタビュー] 分析経験ゼロから、NTTぷららがデータサイエンスチームを立ち上げた理由 2013年5月14日(火)緒方 啓吾(IT Leaders編集部) リスト データ分析人材の不足が指摘される中、情報システム部門主導で、データサイエンティストチームを立ち上げたNTTぷらら。同チームの堀内氏と安達氏に、設立の背景や狙いを聞いた。 データ分析チームを作ったワケ —データサイエンティストのチームを社内に設立されたと伺いました。 堀内 実は、社内ではデータサイエンティストという言葉は使っていないんですが、システムを担当する技術部門の中に、データ分析の専任チームを置いています。メンバーは、私を含めて6名。
AWS News Blog New – AWS PrivateLink for AWS Services: Kinesis, Service Catalog, EC2 Systems Manager, Amazon EC2 APIs, and ELB APIs in your VPC This guest post is by Colm MacCárthaigh, Senior Engineer for Amazon Virtual Private Cloud. Since VPC Endpoints launched in 2015, creating Endpoints has been a popular way to securely access S3 and DynamoDB from an Amazon Virtual Private Cloud (VPC) without
Andrew Betts Web Developer, The Financial Times at Fastly Altitude 2016 Running custom code at the Edge using a standard language is one of the biggest advantages of working with Fastly’s CDN. Andrew gives you a tour of all the problems the Financial Times and Nikkei solve in VCL and how their solutions work.Read less
以前の記事で、私は2種類のシンギュラリティ、すなわち人間を超える超知能が作られる時と、超知能がテクノロジーを高速かつ断絶的に発展させる時を区別しました。 私は、第一のシンギュラリティは起きてもおかしくはない (ただし時期は分からない) けれども、本来の意味でのシンギュラリティというような事象が起きることは全くありえない、と考えています。 実際のところ、いわゆる汎用人工知能、人間と同等の人工知能の実現を目指し、研究開発に従事している人であっても、同様の見方をしている人は珍しくありません。 その中の一人が、ジェフ・ホーキンス氏です。ホーキンス氏はPDA (携帯情報端末) を開発したパーム社の共同創業者ですが、現在はGoogleに所属しているほか、自身で創業した人工知能企業であるヌメンタ社の代表を務め、人工知能に関する研究開発をしています。ホーキンス氏が開発したアルゴリズム「階層型時間メモリ (
ProductArchiving repositoriesJust because a repository isn't actively developed anymore and you don't want to accept additional contributions doesn't mean you want to delete it. Now archive repositories on GitHub to make… Just because a repository isn’t actively developed anymore and you don’t want to accept additional contributions doesn’t mean you want to delete it. Now archive repositories on G
TL;DR新卒就職活動を終了したので供養をする社会に出る前にやれることをやるぞ会社を選ぶ会社を選ぶ上で考えたことを書ける範囲で書く。 以下に登場する「エンジニア」は、大体ソフトウェアエンジニアのことを言っている。 「Web 系」という言葉は結構適当に使っている。 面白い仕事か私はプログラミングは好きだけどそう自信はないし、実績もなく、コンピュータサイエンスと数学の知識は大学の学部卒業程度だと思う。 しかし、急激な速度で進化していて世界を変える潜在的な力を持つソフトウェア、Web サービス、インフラといった分野が好きで、 結局はそういうことに関われる会社に決めた。 これまで20年以上生きてきて、ずいぶん狭い世界で生きてはいるが、昔から面白いと思っているので、 この考えはとりあえずすぐには変わらないだろう。 私はいわゆるインフラをやりたいと思っている。 バックエンドやフロントエンドにしても、T
通勤通学という習慣は1980ごろの未来予測ではなくなるって言われてたけど無くなりそうにない。 遠隔で仕事ができるようになってるんだから、もっと自宅勤務が一般的になると良いんですけれどもね…。 そうなると、自宅勤務者を正社員として雇うよりも、受託契約にして、個人事業主として仕事を丸投げする方が労働を委託する側としては便利だから…とか考えていくとちょっと地獄が見えてきたのでこれ以上は考えないようにする。 ランサー〇!自害せよ! 1980年から来た人シリーズほか 80年代から来た人 カテゴリーの記事一覧 - orangestarの雑記 1980年代から来た人とペペロンチーノ - orangestarの雑記 1980年代から来た人とお会計 - orangestarの雑記 1980年に比べて、お菓子の量やサイズがだいぶ小さくなってる件 - orangestarの雑記 未来のすごく甘い食べ物 - or
tcpdumpの提供する-Wオプションと-Gオプション,ならびにcrontabを併用するといける. tcpdumpの-Wオプションはログローテーションを行う回数で,-Gはそのローテーション期間を秒数で指定できる. 例えば $ tcpdump -w ./%Y%m%d%H%M%S.pcap -W1 -G60などとやると,ログローテーション1回,ローテーション期間は60秒となるので,つまり60秒tcpdumpを実行した後にexitする (ローテーション1回指定なので). ちなみに-wオプションで指定するファイル書き出し先についてはstrptimeと同じフォーマットが利用できるのでこういう時に便利. あとはcrontabでこのコマンドを仕込んでやるとOK (id:hirose31さんから「crontabでは%をエスケープする必要がある」との指摘があり修正しました). 55 * * * * tcpd
皆様こんにちは。 今回は、社外の取引先様等に重要な情報を安心して受け渡しするツールが決まってなかったので、NextCloudを導入してみたエントリーとなります。 以下、これまでの課題となります。 手渡しとか郵送はコストが掛かりすぎてしまう メールは平文のため危険、添付ファイルを暗号化してパスワードは別メールにて送信も危険となる 各種インターネットサービスは適切に管理されてるか監督が難しい、機能が多すぎて誤操作と脆弱性が心配、受け取り側がアカウントを作成して頂かなければいけない場合等々 NextCloudとは、ファイルホスティングサービスを構築するための、PHPとJavascriptで書かれたオープンソースソフトウェアとなります。機能的に似たようなサービスとして比較されるのはdropboxとなります。元々ownCloudという名前で開発されていたのですが、方針の食い違いによりフォークされてN
サービス開発部の外村 (@hokaccha)です。 クックパッドのアプリには「料理きろく」という機能があります。 モバイル端末から料理画像のみを抽出して記録することで食べたものが自動的に記録されていくという機能です。 今回はこの料理きろくで画像判定をおこなっているバックエンドのアーキテクチャについて紹介します。なお、実際に判定をおこなう機械学習のモデルのはなしは以下の記事に書かれているのでそちらを参照してください。 料理きろくにおける料理/非料理判別モデルの詳細 - クックパッド開発者ブログ また、以下のスライドでも料理きろくのバックエンドについて紹介されているのでこちらも参照してみてください。 処理の概要 ざっくりとした画像判定のフローとしては、次のようになります。 クライアントアプリは端末内の画像を判定用に縮小してサーバーにアップロードする サーバーはアップロードされた画像を機械学習を
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く