タグ

2019年12月6日のブックマーク (3件)

  • BigQuery で 1 円も溶かさない人の顔 (ZERO BYTE STRUCT を考案した) - Qiita

    自分は BigQuery で Extract-Load されたデータを機械学習モデル用に前処理し、テラバイト級の特徴量エンジニアリングを行っています。この記事では、BigQuery のデータ量を一切消費せず、誇張なく 1 円も溶かさない裏技をまとめます。(2019/12/18 現在) ※ パロ元:BigQueryで150万円溶かした人の顔 元ネタの方と同じ職場で働くことになりましたので、被せて書いております。この記事では、BigQuery 記事最安値を目指します。 速くて安い BigQuery は、データウェアハウスとしても、特徴量エンジニアリングツールとしても優れており、機械学習モデルを用いたサービスを構築する際には、ベースラインとして一候補に挙がるでしょう。 BigQuery の料金 オンデマンドクエリを利用する際、極めて重要なのは読み取りデータ量に対して \$5/TB の料金が発生す

    BigQuery で 1 円も溶かさない人の顔 (ZERO BYTE STRUCT を考案した) - Qiita
    takc923
    takc923 2019/12/06
  • 本当にあったAWSでやらかした話と対策😭 - Qiita

    概要 みなさんこんにちは🎄 「フォトリ」という家族写真の撮影サービスを運用している会社でCTOをしてるカイトズズキと申します。 この記事では、先日会社のAWSで割と高額の請求が来てしまい😭死にたくなる思いをしたので、そのお話についてしていきます。 AWSは便利だけど、お金使いすぎたりしないか不安になりますよね。 特に僕はそんなにAWSには詳しくない人間なので、なおさらドキドキです。 この記事を通して、僕がやっちまった失敗をみなさんに知ってもらい、 同じような失敗をする人が1人でも減ることを祈ってます🙏 やらかしレベル まず、結果としてどれくらいやらかしたかと言うと、 普段の使用料金以外に、 - Lambda で 10万円 くらい - S3 で 30万円 くらい の請求が来てしまいました、、、 普段は数万円程度で2つのWebサービスを運用しているため、 最初に気づいたときは驚きすぎて理

    本当にあったAWSでやらかした話と対策😭 - Qiita
    takc923
    takc923 2019/12/06
  • Spaceへようこそ! | Post Blog

    日、当社はKotlinConfにて新製品であるSpaceを発表し、早期アクセス(EAP)プログラムを開始しました。 Spaceとは? Spaceは、チームと組織が効果的かつ効率よく共同作業を行うために必要なツールを提供する統合チーム環境です。 Gitベースのバージョン管理、コードレビューKotlinスクリプトベースの自動化(CI/CD)、パッケージレジストリ、計画ツール、課題トラッカー、チャット、ブログ、ミーティング、チームディレクトリなどを備えています。 Spaceは、JetBrainsでの私たち自身のニーズから生まれました。 当社は開発者3名のチームから1200名以上の企業に成長し、在籍者の60%が技術者です。 当社はこの成長に伴い、現在のような独立したツールの使い方は往々にしてサイロ化を招き、伝達の不備、低効率な共同作業、情報の損失の原因となっていることを発見しました。 Spac

    Spaceへようこそ! | Post Blog
    takc923
    takc923 2019/12/06