yassan0627のブックマーク / 2018年6月27日

yassan0627 id:yassan0627

2018年6月27日のブックマーク (2件)

FREDDE フレッデデスク, ブラック, 185x74x146 cm - IKEA
3年品質保証。詳しくは「品質保証のご案内」をご覧ください天板の中央がくびれているので、デスクにより密着して座れます。手首や腕が疲れないので、快適に作業できます天板の両側に飲み物やスナックなどを置ける便利なカップホルダー付き。カップホルダーの素材は、食品に触れても安全なプラスチックですミニシェルフは、必要に応じて、サイドパネルの内側にも外側にも取り付けられます天板の上の棚を取り外すと、32インチまでのモニターやテレビが置けます高さのあるサイドパネルが横からの日差しを遮り、パソコンモニターの反射を抑えます配線口付き。コードをすっきりまとめて配線できます
yassan0627 2018/06/27
自宅の作業机の候補

物欲
リンク
一休のETL処理をAirflowで再構築しました - 一休.com Developers Blog
一休のデータサイエンス部に所属しています小島です。以前データ分析基盤の構築で記事を上げていましたが、今回はETL*1周りの話をしようと思います。 user-first.ikyu.co.jp 今回ETLのツールとして導入したのはAirflowというツールです。 2017年のアドベントカレンダーでも紹介させていただきました。一休のデータフローをAirflowを使って実行してみる一休のETLの現状について一休のETL周りは以下の画像のようになっていました。課題 ETLの処理時間が伸びた（出社後も処理が続いていた）エラーのリカバリ作業に時間がかかる（ログが確認しにくい, サーバーに入って作業しなければいけない）複雑な依存関係の定義がしにくい（どれとどれが依存しているかわからない）リソース負荷（全て並列で実行していた）処理毎のボトルネックが把握できないツールの問題というよりは正し
yassan0627 2018/06/27
UTCがネックで時間間隔がJSTと差異が出るのでジョブのタイミングが直感的じゃないけど、Cloud ComposerもAirflowベースだし、ありかもなぁ。

Airflow

python

データ
リンク
- 2018年6月28日
- 2018年6月27日
- 2018年6月26日