Jenkinsをエンジニアでない人も使えるDigdagのWeb UIとして使う - エムスリーテックブログ
こんにちは、エンジニアリンググループの福林 (@fukubaya) です。 現在、弊社では長年運用され続けているレポート基盤のリニューアルを昨年から続けています。 その一環で、エンジニアでない人も使えるレポート生成UIを実現するため、 DigdagとJenkinsを利用した仕組みを検討しました。 本記事ではその一例をご紹介します。 横浜赤レンガ倉庫は横浜港にある歴史的建築物。本文には特に関係ありません。 レポート生成UIとしてのJenkins 弊社では、客観的なデータに基づき意志決定することがエンジニアに限らず基本となっているため、 あらゆるサービスでデータの蓄積、分析、活用が日常的に行われています。 レポート生成処理は基本的にはスクリプト実行なので、実行もコマンド実行になりますが、 エンジニアでない人にコマンド実行でレポートを生成してもらうのは難しいです。 そこで、弊社ではJenkins
Github APIを使ってOAuth2を理解してみる - techium
OAuth2で認証し、Githubのデータにアクセスしてみましょう。 ライブラリなどを使うと簡単にアクセスすることはできると思いますが、その中で何をやっているかを理解するためにブラウザとcurlを使って通信し、手動で一つ一つ動作せてみましょう。 OAuthの特徴はパスワードを知ることなく特定のサービスのデータを取得や操作ができるようにできることになります。 そのためにやらないといけないこととしては次の事になります。 OAuth アプリケーションの登録 認証 アクセストークンの取得 データアクセス データへアクセスするためにはデータアクセスまでに次の情報を集める必要がああります。 Client ID Client Secret code アクセストークン これらの情報を収集することができればデータのアクセスが可能です。 それぞれのデータの取得方法についてご説明します。 OAuthアプリケーシ
Pipeline
This chapter covers all recommended aspects of Jenkins Pipeline functionality, including how to: get started with Pipeline — covers how to define a Jenkins Pipeline (i.e. your Pipeline) through Blue Ocean, through the classic UI or in SCM, create and use a Jenkinsfile — covers use-case scenarios on how to craft and construct your Jenkinsfile, work with branches and pull requests, use Docker with P
Jenkinsfile、書いてますか？ | GREE Engineering
インフラの駒崎です。Jenkins の Pipeline スクリプトについてのお話です。 早速ですが Jenkins の Pipeline スクリプト、使われていますでしょうか。 もしかしたら以前ちょっと書いていたけどやめてしまったとか、従来の GUI 設定のほうが楽だ、となんとなく敬遠してしまっている方もいるのではないでしょうか。 私が実際そうだったのですが、最近になってやっと Jenkinsfile - Pipeline スクリプトが身近に感じられてきましたので、現状の簡単なまとめを書いてみたいと思います。少しでも似た状況の方へのヒントやきっかけになれば幸いです。 Pipeline スクリプトは難しい？ 私は正直、2016年に Jenkins 2 の目玉機能として Pipeline が出た当初は、とっつきにくい…わからん…と思っておりました。Jenkins を上っ面でなんとなく使ってい
DevOpsにはCIツールが必要不可欠！Jenkinsの導入を考えてみよう | tracpath:Works
DevOpsにはCIツールが必要不可欠！Jenkinsの導入を考えてみよう By tracpath • 2016-07-28 • Development, DevOps はじめに DevOpsをはじめようと思っていますか？ごぞんじの通り、DevOpsにはCI（継続的インテグレーション）ツールは欠かすことができない存在です。現在のところCIツールにはいくつか選択肢がありますが、最も普及しているのはJenkinsでしょう。2016年5月には、マイクロソフトとのパートナーシップが発表され、CIツールとしての地位をさらに高めました。CIツールを選ぶならまずはJenkinsから検討するとよいでしょう。 この記事では、CIツールの選択で迷っているエンジニアの方のために、Jenkinsの紹介や継続的インテグレーション(CI)、継続的デリバリー(CD)などについてお伝えしていきます。ぜひご一読して、CIツ
AWS Black Belt Online Seminar AWS上のJenkins活用方法
1. 【AWS Black Belt Online Seminar】 AWS上のJenkins活用方法 アマゾンウェブサービスジャパン株式会社 トレーニングデリバリマネージャ 大村 幸敬 2017.01.24 2. 自己紹介 • 大村 幸敬 (Yukitaka Ohmura) – トレーニングデリバリマネージャ • トレーニングの実施とトレーニングコース開発 – DevOps Engineering on AWS – Developing on AWS – Architecting on AWS – Data Warehousing on AWS など – 経歴：SIerで自社サービスの開発・運用 金融系のインフラPM – 好きなもの：アウトドアと日本酒と娘^2 – 好きなサービス：AWS CLI 2 3. AWS Black Belt Online Seminar とは AWSJのTec
Airflowによるデータパイプラインのスケジュールとモニタリング - Speee DEVELOPER BLOG
こんにちは！WEBマーケティング事業部エンジニアの@hatappiです。 現在私のプロジェクトでデータパイプラインのスケジュールとモニタリングをAirflowというオープンソースのツールを使用して運用しています。 今回は導入や使い勝手の話です。 Airflowとは？ airbnbがオープンソースで開発したワークフロー管理プラットフォームです。 ※ 現在はApache Incubatorのオープンソースプロジェクトになっています。 Airflowはバッチ同士の関係を管理し、可視化することが出来ます。 また、実行した際のLogや実行時間の推移など、様々なデータの閲覧をデフォルトの機能として使用することが出来ます。 データパイプラインとは？ プロジェクトを運用していると、複数のテーブルにデータが入っており、それらのサマリーを作成するといった経験をしたことはありませんか？ これらの一連のプロセスの
Jenkins タイトル/ヘッダー文字の変更 - vague memory
Jenkinsを使っていて、複数環境を使い分ける必要が出てきた場合に、 見た目が全部一緒で判り難いので環境別に表示を変えたいと思いました。 Jenkinsの標準機能では存在せず、Simple Theme Plugin を使用するのが定石のようなので、こちらを使用します。 Simple Theme Plugin - Jenkins - Jenkins Wiki 変更点 ヘッダーの色と Jenkins の文字部分を変更します。ついでにジェンキンスおじさまにはご退場いただきます。 おじさまとJenkinsロゴはトップページへのリンクが付与されていますが、無くなっても支障が無いので文字列に置き換えます。 環境 Jenkins Ver: 2.7.1 css と js の格納 ${JENKINS_HOME}/userContent に css と js を格納します。 theme.css backgr
JenkinsのUXをモダンにする新プロジェクト「Blue Ocean」登場。統一的デザインのためのJenkins Design Language（JDL）も開発中
JenkinsのUXをモダンにする新プロジェクト「Blue Ocean」登場。統一的デザインのためのJenkins Design Language（JDL）も開発中 ビルドやテスト、デプロイなどの自動化を実現してくれるツール「Jenkins」は、2カ月前の4月に最新のメジャーバージョンアップ版となる「Jenkins 2.0」が登場したばかりです。 そのJenkinsのUXをモダンで魅力的なものにする新プロジェクト「Blue Ocean」が発表され、ソースコードの公開が始まりました。 シンプルで魅力的なUXへ Blue Oceanの開発理由は、「Introducing Blue Ocean: a new user experience for Jenkins」で次のように説明されています。 In recent years developers have become rapidly attr
Auto ScalingによるJenkinsのHAの実現とDockerスレーブ
Auto ScalingによるJenkinsのHAの実現とDockerスレーブ 1. Auto ScalingによるJenkinsのHAの 実現とDockerスレーブ 2016/04/12 株式会社SHIFT 第8回「じどうかの窓口。」セミナー 2. アジェンダ Auto ScalingによるJenkinsのHA Amazon EC2 pluginによるスレーブの最適化 CloudBees Docker Custom Build Environment Pluginによるビルドのポータルブル化 1 3. 2 Auto ScalingによるJenkinsのHA 4. Jenkinsのマスター ベスト・プラクティス JenkinsのマスターはSPOF Jenkinsのマスターは「同時ビルド数」を0にして、ビルドはスレーブ に任せ、負荷を下げる 課題 とはいえ、管理するスレー
Drone.io のご紹介
わかる！metadata.managedFields / Kubernetes Meetup Tokyo 48Preferred Networks
CentOS に Jenkins をインストールする | iret.media
こんにちは、cloudpack の 田村です。 みんな大好きJenkinsおじさんを CentOS にインストールします。 CentOS に Jenkins をインストールする手順 Javaまわりのインストール OpenJDK yum -y install java-1.7.0-openjdk java-1.7.0-openjdk-devel リポジトリの取得 cd /etc/yum.repos.d/ curl -OL http://pkg.jenkins-ci.org/redhat/jenkins.repo rpm --import http://pkg.jenkins-ci.org/redhat/jenkins-ci.org.key Jenkinsのインストール yum -y install jenkins Jenkinsの設定 ProcessTreeKillerの無効+Timezon
Jenkinsをインストールしたら入れるプラグイン18個 - Qiita
Overview 備忘録としてJenkinsをインストールした後大抵入れているプラグインを列挙 & 軽く解説 Build Docker plugin Dockerコンテナを使い捨てのスレーブとして起動出来るようになる。 ジョブ起動ごとにコンテナが起動するのでクリーンなビルド環境を維持、他環境への影響を抑えられる。 使い捨てのビルドに使ったり、使い捨てのテストに使ったり、CMツール(Chef, Ansible等)のCIに使ったり用途色々。 スレーブで利用するイメージはランタイムごとにタグを分けてDockerHubでAutomation Buildしておけばジョブごとに好きなランタイムでビルド出来て良い感じになる。 例). shufo/jenkins-slave-ubuntu (phpとnodejsのランタイムは作ってある)をスレーブとして使うとすると、JenkinsのDocker Plugi
Jenkinsがやっぱりなんだかんだで最強のCIツール
Post author:sider Post category:Other Reading time:1 mins read Post published:2014-04-03 Jenkinsがやっぱりなんだかんだで最強のCIツールだとみなさんも思いませんか？私たちSideCIチームではコードのテスト(RSpec)の実行はCircleCIを使っています。ローカルではcapybaraさんもつかったり。(CapybaraはCircleCIとはそもそもが違いますがｗ) しかしながら、CI=テストではないわけで、CircleCIではなく、Jenkinsを使っている部分もあります。Jenkinsは汎用性の高さが最高です。 Jenkinsが最強なワケ 私は以下の理由でJenkinsを最強だと考えています。 どんなスクリプトも実行できる非常に高い汎用性 どんなタイミングでもスクリプトを実行できる幅広いト
Zabbix＋Pacemaker＋Fluentd＋Norikra＋Jenkinsで監視、クラスタリング、ログ収集／解析、バックアップ
Zabbix＋Pacemaker＋Fluentd＋Norikra＋Jenkinsで監視、クラスタリング、ログ収集／解析、バックアップ：Elasticsearch＋Hadoopベースの大規模検索基盤大解剖（終）（1/2 ページ） リクルートの事例を基に、大規模BtoCサービスに求められる検索基盤はどう構築されるものなのか、どんな技術が採用されているのか、運用はどうなっているのかなどについて解説する連載。最終回は、監視、クラスタリング、ログ収集／解析、バックアップに使っているOSS技術と、その使いどころを紹介する。 連載目次 リクルートの全社検索基盤「Qass」の事例を基に、大規模BtoCサービスに求められる検索基盤はどう構築されるものなのか、どんな技術が採用されているのか、運用はどうなっているのかなどについて解説する本連載。 最終回となる今回は、前回の「AWS＋オンプレのハイブリッドクラウド
ベンチャーでナウくなりそうなセキュリティサービス - Money Forward Developers Blog
マネーフォワードでエンジニアをしています鈴木です。 前職でセキュリティ関係の仕事に携わっていた流れで、本日は私が個人的に注目しているセキュリティサービス・ツールを紹介しようと思います。 ※ナウいはちょっと古い感じがしますが、ご容赦ください。 既存セキュリティ対策の課題 FinTech系ベンチャーがお預かりする利用者のデータは、プライベートな情報の塊です。 万が一にでも、そんな情報が漏れたら...と利用者が考えるのは当然の事です。そういった懸念を払拭するため、FinTech系ベンチャーの大きな課題の一つに、「適切な情報セキュリティ対策の実施」があります。 技術的な基本対策としては、適切な鍵長のSSLを実装する、データを暗号化して管理する、ペネトレーションテストをするなどがあり、恐らくどこの企業様でも当たり前のように実施されているでしょう。尚、弊社の取り組みについてはこちらやこちらをご参照くだ
HubotでJenkinsのジョブを実行する | メモ帳代わりのブログ
まえがき HubotをつかってJenkinsのジョブをじっこうしてみたのでメモしておきます @hubot jenkins build ジョブ みたいな感じでJenkinsのジョブを叩くことができるようになります。こうなればdeployなんかも簡単にできるでしょう。 最初に Jenkins側でHubotでアクセスする用のユーザーを作成しておく必要があります。ジョブを実行できる権限を与えておく事が必要です。 わかりやすく『hubot』という名前で今回は作成しておきました。 Hubot側の修正 『hubot-scripts.json』を修正します [ "jenkins.coffee" ] みたいな感じで『jenkins.coffee』を使えるようにしておきます あとは環境変数にJenkinsのURLと認証情報をを追加します。起動スクリプト内に仕込んでもいいかもしれません。 こんなかんじで↓ ex
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
JenkinsとCodeBuildとCloud Buildと私
リリースフローを自動化するためのJenkinsの導入／設定手順
JenkinsとAnsibleによるサーバー構築の自動化
