5千ファイル超のレガシープロジェクトにPHPStan継続的静的解析を導入｜Komiyama Taki｜note
以前、断捨離でテーブル約50個消した話で、大規模にdbまわりのリファクタリングをした話を書きました。 弁護士ドットコムのサイトは、10年以上運用されているため、5千ファイルある巨大PHPプロジェクトです。そのため、課題はいろいろあります。 弁護士ドットコム - 無料法律相談や弁護士、法律事務所の検索 https://www.bengo4.com/ 今回は、PHPStan静的解析をCIに導入し、継続的なコード品質の向上を目指しました。 静的解析を導入する目的コードベースが長年の拡張により巨大になった結果、全ての関数やclassの使用箇所を目視で把握するのは、厳しくなってました。いくら注視していても、対象が広くなるほど漏れは発生しやすくなります。 そのため、人間の目では見落としやすいバグを機械的に見つけることで、コード品質の向上に繋がると考えました。PHPStanをCIでレビュー前に回すことで
機械学習にも便利なPythonライブラリ「Pandas」の初心者向けチュートリアル - paiza開発日誌
秋山です。 機械学習やディープラーニングが流行っていますが、基本的には何をするにも大量のデータを取り扱いますよね。 データの集計・分析は、機械学習をするのに大前提として必要な作業です。 そんなときに便利なライブラリがPandasです。Pandasは、Pythonを使ったデータ解析に便利な機能を提供しているライブラリです。数値や時系列のデータの操作や、データ構造をいじったりすることができます。 というわけで、今回はそんなPandasを使えるようになりたい初心者の人に向けて、ちょっとしたチュートリアルを書いてみます。 ■Pandasって何ぞ Pandasとは超ざっくり簡単に言うと、Pythonを使って、ExcelやSQL、R言語みたいな感じでデータを取り扱えるようにしてくれる便利なライブラリです。 例えば、データの整列、グループ化、データ同士の結合、スライス、欠損データがあった場合の除外、時系
無料で手に入る技術書のPDFをありったけ上げてみた - Qiita
この記事の目的 技術書は巷にあふれていますが、いろいろ勉強しようとすると大変な金額になります。しかし、英語という一点を我慢すれば、出費をかなり抑えることができます。この記事では、私がこれまでに見つけてきた技術書のリンクをありったけ貼っておきたいと思います。 ここでのリンクはすべて英語の記事になります。日本でも出版されているものに関しては日本語の書名も並べて書いておきます。 リンクが切れる前にお早めに！！ リンク集 C言語 Oualline "Practical C Programming (3rd edition)" (C実践プログラミング) Java Niemeyer "Learnig Java (3rd edition)" Harold "Java Network Programming (4th edition)" (Javaネットワークプログラミング) Python Summerf
Wes McKinney - Apache Arrow and the “10 Things I Hate About pandas”
This post is the first of many to come on Apache Arrow, pandas, pandas2, and the general trajectory of my work in recent times and into the foreseeable future. This is a bit of a read and overall fairly technical, but if interested I encourage you to take the time to work through it. In this post I hope to explain as concisely as I can some of the key problems with pandas’s internals and how I’ve
超高速な開発ができるわけ | Yakst
あるひとりの人がシステムを作ったが故にそのシステムに精通している場合に、最も生産的な開発が行われる。しかしこれは、ひとりの人がシステムの面倒を見ることを超えてシステムが成長する時には矛盾してしまう。 ある状況下において、特定の開発者たちが他の人の10倍生産性が高くなることがあるのはなぜかについて議論してみましょう。 ヒント : 開発者の話ではなく、状況が大きなカギ。 生産性が非常に高いことにウキウキした気分になるのはいつでしょうか。新しい機能が指先からあふれ出てくる時？それは、私たちが関わるツールのことを知り尽くしている時、あるいはもっと決定的に言うと、自分がシステムを変更しつつある時に起こるのです。自分のバックパック、それも自分で詰め込み、そしてひとつひとつの小袋の中まで何年にもわたる旅行を経て調整してきたバックパックの中身を知っているように、システムを知ることです。それぞれのモジュール
Effectively Using Matplotlib - Practical Business Python
Taking care of business, one python script at a time Introduction The python visualization world can be a frustrating place for a new user. There are many different options and choosing the right one is a challenge. For example, even after 2 years, this article is one of the top posts that lead people to this site. In that article, I threw some shade at matplotlib and dismissed it during the analy
Rubyにおける機械学習と統計分析のための環境整備の取り組み
Ruby Business Users Conference 2017
Jupyter Notebook を使ってみよう
本ページでは、Jupyter Notebook の概要と基本的な使い方について紹介します。 Jupyter Notebook とは Jupyter Notebook (読み方は「ジュパイター・ノートブック」または「ジュピター・ノートブック」) とは、ノートブックと呼ばれる形式で作成したプログラムを実行し、実行結果を記録しながら、データの分析作業を進めるためのツールです。 プログラムとその実行結果やその際のメモを簡単に作成、確認することができるため、自分自身の過去の作業内容の振り返りや、チームメンバーへ作業結果を共有する際に便利なほか、スクール形式での授業や研修などでの利用にも向いています。 このようなノートブック形式で分析作業を行うためのツールとしては、微分積分などの科学技術系計算ソフトウェアの Mathematica (マセマティカ) や Spark, Hadoop などの並列分散処理シ
The Go Programming Language
The Go Programming Language Alan A. A. Donovan · Brian W. Kernighan Published Oct 26, 2015 in paperback and Nov 20 in e-book Addison-Wesley; 380pp; ISBN: 978-0134190440 authors@gopl.io Contents [PDF] Preface [PDF] 1. Tutorial [PDF] 2. Program Structure 3. Basic Data Types 4. Composite Types 5. Functions 6. Methods 7. Interfaces 8. Goroutines and Channels 9. Concurrency with Shared Variables 10. Pa
障害の事後分析を読んで得た教訓 ― 「何がシステムを停止させるのか？」 | POSTD
私はポストモーテム（事後分析）の記録を読むのが大好きです。ポストモーテムを読むと勉強になりますが、大抵の教材的資料とは違って、興味深いストーリーが含まれているのです。相当な時間をかけてGoogleとMicrosoftのポストモーテムを読みました。大きな障害を招く最大の原因について、私は（まだ）きちんと分析していませんが、何度も繰り返し目にするポストモーテムのパターンがいくつかあります。 エラーハンドリング 適切なエラーハンドリングのコードを書くのは難しいものです。エラーハンドリングのコードに含まれるバグは、 大きな 問題を引き起こす主な原因となっています。つまり、エラーによってバグのあるエラーハンドリングのコードが実行されるということは、単に個々のエラーが重なるだけという事態にはとどまらないのです。障害が重なって重大なシステム停止につながることはよくあります。それはある意味明らかなことで、
7年働いた時点での私の仕事の極意 - Kengo's blog
最重要 実行に重きを置く やらないで後悔するよりも、やって反省する。 反省は成長を産み生産的だが、後悔は精神の無駄な消費。 時間は有限で貴重な資源だが、たぶん今の段階では行動する前に得るものや結果を予測するのは難しい。 正しい反省の方法とは何か、考え続けること。 「正しく反省するために、何を記録しておくべきか」実行前に明らかにしておくこと。 反省の結果は組織的な何かに落としこむ。組織構造、戦略、静的解析、自動テスト、教育など。意識しないでも巨人の肩に乗れる状況を作ることが、組織の成長につながる。 Done is Better Than Perfect ただし、思考停止の言い訳にしないこと。詰めの甘さを擁護する言葉ではない。詰めの甘さは立場や考え方が違うひと3人くらいに意見を求めればだいたい炙り出せる。 長期的視野を持ちつつ、それに引っ張られない。進展を作ること、現状を少しずつ変えることを意
Docker breakout exploit analysis
Recently, an interesting Docker exploit was posted (http://stealth.openwall.net/xSports/shocker.c) that demonstrates an information leak where a Docker container can access some privileged filesystem data where it shouldn’t. As I was just discussing the relative merits of using Docker, and how security is often quoted as one of them, I thought it would be interesting to dissect exactly how this ex
「ゼルダの伝説 風のタクト」を解析してわかった任天堂のすさまじい技術
作成されたモデルに質感を与えるテクスチャと呼ばれる技術は、ゲームを開発する上で重要な要素になります。2002年に任天堂からニンテンドーゲームキューブ向けに発売されたゲーム「ゼルダの伝説 風のタクト」を愛してやまないゲーム開発者が、風のタクトのテクスチャを解析したところ、任天堂のすさまじい技術力がわかったとして、解析した内容を公開しています。 Zelda: Wind waker Tech and Texture Analysis *picture heavy* - Polycount Forum http://www.polycount.com/forum/showthread.php?t=104415 風のタクトをのテクスチャを解析したwarbyさんが、一番最初に驚いたのは、服や布の自然な動きが事前に計算されていたものではなかったことです。もし事前に計算されていたなら、下記画像のリンクが持
映画評論家・町山智浩による「難解映画 アイズ・ワイド・シャット」の謎解き
2013年12月22日放送の『たまむすび』(毎週月-金 13:00 - 15:30)にて、映画評論家である町山智浩がゲスト出演していた。そこで、スタンリー・キューブリックの遺作『アイズ ワイド シャット』の解説を行っていた。 アイズ ワイド シャット あらすじについて 伊集院光：トム・クルーズとニコール・キッドマンが出演していて。トム・クルーズがセレブな、お医者さんで男前でお金持ちで。子供一人で、傍目からは幸せそうに見える夫婦なんだけども。 町山智浩：はい。 伊集院光：薬物を吸引したことで、ニコール・キッドマンが変なことを言い出すんですよね。夫婦間ではイヤなこと。「昔、みんなで旅行に行った時に、横にいた将校を見ていて、あの人に口説かれたら、寝たかもしれないわよ」みたいな。 町山智浩：そうなんです。そういう告白をするんです。 伊集院光：トム・クルーズが、それに凄いヤキモチをやいて。 町山智浩
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Kaggle: The Home of Data Science
Stripe
VisGit
http://www.machu.jp/posts/20130614/p01/