PostgreSQLのIOにまつわるエトセトラ | TECHSCORE BLOG | TECHSCORE BLOG
こんにちは。寺岡です。 これは TECHSCORE Advent Calendar 2017 の14日目の記事です。 PostgreSQLのIO問題を調査する機会があり、RDBMSのIO問題を取り巻く状況についてまとめてみました。 本記事は一般的なLinux+PostgreSQL環境を対象としています。 RDBMSとACID PostgreSQLをはじめとした多くのRDBMSはトランザクションの信頼性を強く保証するシステムです。 この特性は原子性(Atomicity) 一貫性(Consistency) 独立性(Isolation) 永続性(Durability) の頭文字を取りACIDと呼ばれています。 RDBMSにおけるACIDとは、全利用者（クライアント）が実施した操作（クエリ）が、実施された順番で完了することが保証（トランザクション、レプリケーション）されることを表します。 トランザ
Angular2でさくっとMEANスタックをはじめてみる | TECHSCORE BLOG | TECHSCORE BLOG
こんにちは、平奥です！ これは、 TECHSCORE Advent Calendar 2016 TECHSCORE BLOG の22日目の記事です。 弊社サービス Synergy! は、 AngularJS で実装されています。 AngularJS はご存知の方も多いとは思いますが、後継バージョンの Angular2 が登場しました。 Angular2 は AngularJS の問題点が整理されました。その結果、使いやすく、そしてパフォーマンスもものすごく改善されています。 しかし問題点もあります。 AngularJS との互換性がありません。 そのため Angular2 を動作させるには今まで使用していた AngularJS の環境を使うことはできず、新たに動作させる環境を用意しないといけません。 Plnkr などを使えば簡単に Angular2 の検証はできるのですが、せっかくなら A
Apex で Go はどう実行されているのか | TECHSCORE BLOG | TECHSCORE BLOG
var child = require('child_process') var byline = require('./byline') /** * Context for the request. */ var ctx /** * Child process for binary I/O. */ var proc = child.spawn('./main', { stdio: ['pipe', 'pipe', process.stderr] }) proc.on('error', function(err){ console.error('error: %s', err) process.exit(1) }) proc.on('exit', function(code){ console.error('exit: %s', code) process.exit(1) }) /** *
Jersey Client API : Java でWeb API Client を作成する方法 | TECHSCORE BLOG | TECHSCORE BLOG
私たちはシステムをサブシステム・マイクロサービスに分割する方針を採用しているので、サブシステム間の通信、Web API を呼び出す処理を開発することが多くあります。このような処理をJavaで開発する場合、何をつかってどう書いたらいいでしょうか。この記事では、弊社シナジーマーケティングのプロダクト開発のスタンダードな方法をご紹介します。 目次 Jerseyとは クライアントの作成 GETメソッドの実行 POSTメソッドの実行 HTTPヘッダーの指定 JSONのパース Jerseyとは ライブラリは Jersey を利用しています。Jersey ( https://jersey.java.net/) は、RESTful Web サービスとそのクライアントのJava API 標準規格であるJAX-RS API (http://jax-rs-spec.java.net/) のリファレンス実装です。
冗長化アーキテクチャつまみ食い | TECHSCORE BLOG | TECHSCORE BLOG
想像してみてください。今この瞬間…… 悪意のないユーザがF5キーに手を添えたまま、うたた寝してしまうかもしれません 巨大ニュースサイトにリンクが張られ、大量のユーザが流れ込もうとしているかもしれません エンジニアが不注意で埋め込んだ不具合がプロセスを落とし、パフォーマンステストを怠ったSQLがCPUやIOを占有することもあるでしょう ミドルウェアやOS、ネットワーク機器のファームウェアだって完ぺきではありません サーバのメモリを狂わせるため、宇宙線は虎視眈々と隙をうかかがっています 数え上げればきりがない程、サーバ達は常に危機に晒されているのです。 一台のサーバやネットワーク機器の障害で大切なシステムをダウンさせてしまうわけにはいきません。 深夜に障害を告げ鳴り響く携帯電話に叩き起こされ、やっとの思いでシステムを復旧させた朝、関係各所に平謝りしながらクライアントへの障害報告書を用意する、な
ServerlessでJavaアプリケーションをデプロイしちゃおう | TECHSCORE BLOG | TECHSCORE BLOG
この記事では、Serverless Framework(以下Serverless)を使ってサンプルのWebアプリケーションをAWS LambdaとAmazon API Gatewayにデプロイします。 Serverlessとは、マイクロサービスで構成される、サーバレスなアプリケーションの構築を支援するフレームワークです。 現在のところ、AWS Lambdaで動作するアプリケーションで使うことができます。（Azure FunctionsやGoogle CloudFunctionsへの対応はWIPとなっています） Node.jsとPythonのランタイムはこれまでもサポートされていましたが、現在ベータ版として公開されているv1.0では新しくJavaについてもサポートされています。 それでは、一足早く体験してみましょう。 インストール node.js 適当な方法でインストールし、npmコマンドが
JaCoCo+Tomcat+Jenkinsを使って手動テストのカバレッジレポートを出力する | TECHSCORE BLOG | TECHSCORE BLOG
こんにちは横部です。 JaCoCoはJavaの為のコードカバレッジ取得ライブラリです。 http://www.eclemma.org/jacoco/ このライブラリを使うと、 テストでどこのコードを通ったのか数値化されるため、 テスト漏れを防ぐことができます。 私が参画しているプロジェクトではJUnitによる単体テストはJenkinsで自動化されており、Gradleでビルドされています。 https://gradle.org/ その際はbuild.gradleにGradle JaCoCo Pluginを設定するだけで、 簡単にコードカバレッジの取得とカバレッジレポートの出力ができていました。 しかしこのプラグインはGradle実行中のみ有効である為、 UIを操作して行う手動テストだとGradle JaCoCo Pluginが使えません。 UIを操作して行う手動テストでコードカバレッジを取得
比較：並行処理 - Java とScala とGo - | TECHSCORE BLOG | TECHSCORE BLOG
こんにちは、馬場です。 完全に出遅れていますが、個人的に触ってみたかったGo言語と戯れてみたいと思います。Go 言語といえば並行処理ですよね。せっかくですので、他の言語Java 8 / Scala 2.11 と比較しながら見ていきたいと思います。 お題：二分探索木を比較する。 並行処理のお題は、超充実しているGo 言語のチュートリアルTour of Goのエクササイズ、Equivalent Binary Tree です。 二分探索木とは、子の数が最大２である二分木で、「あるノードの左の子およびその全ての子孫ノードの持つ値はそのノードの値より小さく、右の子及びその全ての子孫ノードの持つ値はそのノードの値より大きくなるように構成した」もの(Wikipedia)です。 ２つの二分木が、形はちがえど同じ値を保持している場合があります。そのために、 1. 二分探索木を生成し、 2. 2つの二分木の解
Capistrano3でプライベートリポジトリからデプロイする | TECHSCORE BLOG | TECHSCORE BLOG
こんにちは寺岡です。 この記事は TECHSCORE Advent Calendar 2014 の 3 日目の記事です。 それは遥か昔、世界が未だデプロイツールを手に入れる前のお話。 その頃のエンジニアにとって、デプロイは神聖かつ盛大な儀式であった。 儀式には決して破ってはいけない戒律が存在した。 「tar、scp、rakeなどの高度で難解な呪文を駆使し、正しい順序をもって執り行うべし」 戒律は地域、文化、宗教の違いによりさまざまなバリエーションが存在し、儀式の困難さに拍車をかける。 しかし、最後は必ずこう締めくくられるのだ。 「一度呪文を間違えたその時は、大いなる災厄がこの世を襲うであろう」と。 災厄を恐れたエンジニアたちは、長大で重厚な手順書を作り、なんとかデプロイを乗り切ろうとした。 それでもなお、手順書のバグやタイプミスにより悲劇は繰り返されるのであった…。 しかし、度重なる悲劇と
Rails複数DBシステムMySQLからPostgreSQL移行物語 | TECHSCORE BLOG | TECHSCORE BLOG
こんにちは、三苫です。 この記事はTECHSCORE Advent Calendar 2014、5日目の記事です。 近年、Rails複数DB Casual Talksが開催されるなど、Railsでも複数・異種データベース混在したシステム構成は何ら特別でなものではなく通常の開発でカジュアルに選択される構成だぞという機運が高まっています。 togetterで参加者の反応を見ても、「establish_connectionは基本」「前にも見たぞこのスライド」など、おおむね知見が業界全体に広まりつつある事がわかります。 本記事はRails複数DBがまだカジュアルではない時代、マルチテナントシステムのデータベースをMySQLからPostgreSQLに、各サブシステムは縮退しつつも、システム全体としては無停止で移行を行った記録を共有するためのものです。 移行したシステムの前提 マルチテナントシステム
PostgreSQL経験者がMySQLでシステムを構築した時のチェックポイント | TECHSCORE BLOG | TECHSCORE BLOG
こんにちは。三苫です。 この記事はTECHSCORE Advent Calendar 2014、1日目の記事です。 本日はPostgreSQL経験の長い私がMySQLのシステムを新規に構築、運用するときにハマった泣いたリストをチェックリストとして共有します。 PostgreSQLしかまともに使ったことがない人が準備不足でMySQLに突撃すると何が起こるか知っておきましょう。 @tmtms さんのMySQLユーザーがPostgreSQLを触ってみたメモと重なる部分も多いですが、逆から見た視点ということでご容赦を。 必ずチェックが必要 SQLモードをPOSTGRESQLにするのが良さそう INSERT時にエラーをスルーするような挙動を避ける 型の上限値を超えた数値をINSERTした時に、エラーを出さずに最大値をセットするような挙動を避ける （この挙動を知った当時はそれなりに衝撃でした…） GR
Docker上でRailsアプリケーション開発 | TECHSCORE BLOG | TECHSCORE BLOG
イメージを取得して起動するだけです。 コンテナはデタッチモードで動かしたいので -d オプションを指定しています。また、コンテナには名前を付けておくと便利なので --name で「postgres」という名前を付けました。 ポイントは環境変数として「-e LC_ALL=C.UTF-8」を指定しているところです。これは initdb でデータベースクラスタを初期化するときのエンコーディングを UTF-8 とするためです（デフォルトでは SQL_ASCII になります）。 Rails 開発用のイメージを作成する 次に Rails 開発用のイメージを作成します。 PostgreSQL は既存のイメージをそのまま使用しましたが、今度は個人用の開発環境を作りたいのでそうもいきません。 Dockerfile を書いて自分用のイメージを作成することにしました。 FROM ubuntu:14.04 MAI
隔離の技術Dockerの考え方と使い方の基本 | TECHSCORE BLOG | TECHSCORE BLOG
こんにちは、鈴木です。 「AWSでDockerを使ってみよう！」では Docker を取りあえず使ってみました。今回は「Docker とは？」というところから、Docker の基本的な操作を行うところまで見ていこうと思います。 Docker とは Docker とはコンテナ型の仮想化を実現するためのソフトウェアです。 Xen や VMware のようなサーバ仮想化との違いは、扱う単位がマシンではなくプロセスである点です。 この違いは非常に重要です。 サーバ仮想化ではホストマシン上でゲストマシンが動き、ゲストマシン内で様々なプロセスが動きます。一方のコンテナ型の仮想化では、ホスト OS 上にコンテナという隔離された空間が作成され、その中でプロセスが実行されます。 コンテナは隔離の技術 Docker を使い始めたばかりだと「コンテナ内に bash で接続してみたけれど cron や syslo
あえて言うほどではない プロジェクトルートを取得する方法 Gradle編 | TECHSCORE BLOG | TECHSCORE BLOG
こんにちわ、北川です。 最近は、Gradle をお勉強中です。 わかってしまえば簡単な話なのですが、ファイルを参照する際に、 絶対パスで記載したいけど、環境によってプロジェクトルートは変更されてしまうので ビルドスクリプトのあるディレクトリを取得する方法はないかと調べました。 ファイルを参照する 相対パス File configFile = file('src/config.xml') 絶対パス File configFile = file('/home/kitagawa/app/src/config.xml') こんな感じでfileメソッドに絶対パスを記載することは可能ですが 環境固定になってしまうので、環境ごとにプロジェクトルートを 取得して絶対パスを生成できるはずだ！と悩むこと1ヶ月。。。 なんと、プロジェクトルートを取得する方法はドキュメントに記載されていました。 build.gr
Redisにおけるデータの永続化 | TECHSCORE BLOG | TECHSCORE BLOG
こんにちは、鈴木です。 Redis におけるデータの永続化についてです。 RDB と AOF Redis におけるデータの永続化には 2 つの方式があります。 一つは RDB ファイル（RDB = Redis DataBase だと思います）に書き出す方式で、あるタイミングのスナップショット（フルダンプ）です。 もう一つは更新系のクエリが逐次追記される AOF (Append Only File) です。 RDB と AOF は両方を有効にすることができ、その場合は RDB と AOF の両方が出力されますが、Redis 起動時には AOF からデータが復元されます。 RDB を保存する RDB ファイルを保存するには、save ディレクティブで保存するタイミングを指定します。
Maven-TECHSCORE-
本章では、Apache Software Foundation で開発されているプロジェクト管理ツール「Maven」について解説します。 Maven はプロジェクト情報の一元管理、統一したビルドプロセスの提供、依存ライブラリの管理などの機能により、 開発者にかかるプロジェクト管理の負担を軽減します。 現在の Maven は、version 1 系統と version 2 系統が平行して開発されていますが、本章では version 2 系統について説明します。 Maven INDEX Maven とは 1.1. Maven とはどのようなものか 1.2. Maven の入手とインストール Maven 入門 2.1. Maven のアーキテクチャ 2.2. Maven の実行 2.3. プロジェクトの作成 2.4. pom.xml について 2.5. コンパイル 2.6. ユニットテスト 2.
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Rubyでワンライナー AWS編 | TECHSCORE BLOG | TECHSCORE BLOG
TECHSCORE - Java,SQLプログラミング技術解説