Googleがオープンソース脆弱性のデータベースをPythonやGoにまで拡大
オープンソースプロジェクトにまつわる脆弱性の問題を解決するため、Googleは脆弱性データベース「Open Source Vulnerabilities(OSV)」を構築しています。2021年6月24日付けの発表で、OSVが扱うオープンソースプロジェクトの範囲がPython、Rust、Go、DWFにまで拡大することが明らかになりました。 Google Online Security Blog: Announcing a unified vulnerability schema for open source https://security.googleblog.com/2021/06/announcing-unified-vulnerability-schema.html GitHub - google/oss-fuzz: OSS-Fuzz - continuous fuzzing fo
ゼロからはじめるPython(76) ColabのGPU高性能マシンが月1072円で使い放題になっていた件
Googleアカウントさえあれば無料でPythonの機械学習プラットフォームが使えるColaboratory(通称Colab)というサービスがある。既に本連載でも何度か紹介したことがあるが、3月末に待望の有料プランが日本でも始まった。有料プランでも制限はあるもののGPUを備えた超高性能マシンが月1072円で使い放題になったのは大きい。実際に有料版を試してみたので使い勝手を紹介しよう。 1072円で高性能マシンが使い放題に Colabについて復習してみよう まずは、改めてPythonのColabについて紹介しよう。一言で言うならGoogle Colabはブラウザ上で使えるPythonの実行環境だ。Googleが無料で提供しており、教育用途や研究用に使えるものだ。 そもそもPythonで人工知能(AI)を、特に機械学習を試してみたいという人は多いことだろう。ところが、Pythonや機械学習の実
GoogleがPython Software Foundationへの支援を強化「ビジョナリースポンサー」に。CPython実装のための常駐開発者を雇用へ
GoogleがPython Software Foundationへの支援を強化「ビジョナリースポンサー」に。CPython実装のための常駐開発者を雇用へ GoogleとPython Software Foundationは、GoogleがPython Software Foundationのトップスポンサーに位置する最初の「ビジョナリースポンサー」になったことを発表しました（Python Software Foundationの発表、Googleの発表） We are happy to announce we're increasing our support for the Python Software Foundation. This includes donating $350,000+ to support three PSF projects, recommitting to
Google Trendsの情報をPythonで取得したい。pytrendsの紹介 | DevelopersIO
データアナリティクス事業本部＠札幌の佐藤です。 Google Trendsの情報を取得したいなということがあり、ライブラリを調べていたところ、pytrends というライブラリを見つけましたので触ってみました。 当機能はGoogle非公式APIとなりますので、Google側の仕様変更によって使用できない機能などがありますのでご注意ください。 GitHubの内容を見る限り、googleに対して直接リクエストを投げて情報を取得しているようです。 そのため取得期間が長い場合、googleからエラーが返却されることがありますので注意が必要です。 また、一部日本では動かない箇所があるため、これからなライブラリかなと思います。 情報の返却にPandasライブラリを利用しているため、Lambda Layersなどで使用したい場合は当ライブラリに加えてPandasライブラリが必要になります。 pytren
PythonでBigQueryの料金を監視する
この記事は GMOアドマーケティングAdvent Calendar 2020 2日目の記事です。 皆さん こんにちは、GMOアドマーケティングのS.Rです。 GoogleのBigQuery(Google Cloud Platform)という大規模なデータ分析ツールを使ったことがありますか? BigQueryでは1PB（ペタバイト）あるいは10億行といった膨大なデータに対して、SQLで集計・分析処理を極めて高速に実行できます。 ただBigQueryのQueryを実行するには、気を付けなければ高い料金が課せられます。 今回は、Pythonで、GCPのSDKでBigQueryの実行する状況を監視するプログラムを作る方法を、皆さんへ紹介させていただきます。 プログラムの構成 プログラムの構成は下記です。 Service account を作成&権限を設定 GCPの管理画面のService a
Google Colaboratoryを使えばブラウザ上でPythonの実行環境が簡単に手に入る - タダケンのEnjoy Tech
こんにちは! タダケン(@tadaken3)です。 Googleが機械学習の教育や研究用に提供しているGoogle Colaboratoryを試してみました。ColaboratoryはJupyter notebookを基盤としたオープンソースプロジェクトです。Chromeのデスクトップ版で動作します。 Colaboratoryを使えば、Chromeブラウザ上で無料でPythonの実行環境を手に入れる ことができます。今回は、Colaboratoryの使い方を解説します。 バリバリのデータ分析者にも、Pythonでプログラミングを学んでみたいと思っている初学者にもおすすめのツールです。 そもそもJupyter notebookとは Google Colaboratoryを起動する Google ColaboratoryでPythonのコードを実行する 作成したnotebookを保存する まと
これで音声テキスト化が楽になる！Pythonで音声認識を作る方法
最近ではPythonでプログラミングをしたり、AI（人工知能）を使ったりする人が増えていますよね。 Pythonでプログラミングして作れる物の一つに、音声認識があります。以前は音声認識の精度があまり良くありませんでしたが、近年、音声認識の精度は驚くほど向上し、色々な言語の違いだけではなく、方言まで認識することができるようになったとのこと。さらに、さまざまなAPIの登場などにより、音声認識のプログラムを作成した経験がない人でも簡単に、Pythonで音声認識ができるようになりました。 とはいえ、何も知らない状態でいきなり音声認識を作るのはやはり難しいでしょう。そこで今回は、Pythonで音声認識を作る方法についてお伝えします。1つ1つ丁寧に解説していくので、Pythonの音声認識の作り方について、一緒にマスターしましょう！
Google Colab上でdarknet（YOLO）を使って物体を数える【画像認識】 - 猫と宇宙と音楽と
こんにちは。wakuphasです。 ここ1週間ほどディープラーニングを使った画像検出・分類について色々と試していたのでその覚書を投下しておきます。 最終的に、YOLOという物体検出アルゴリズムを用いて、自前の画像データを認識させるところまでいきます。 MacのCPUで学習すると無限に時間がかかるので以下のようなやや面倒なプロセスとなっています。 Macで学習寸前までデータを準備して ↓ 一度そのデータを丸ごとGoogle ColaboratoryにアップロードしてGPUで学習 ↓ 学習結果をまたMacに戻してCPUで画像認識させるというものになっています。 ※全ての情報は2018年9月現在のものです。 ◇目次 YOLO・darknet・darkflowとは Google Colaboratoryとは 開発環境 1. データの準備（Mac上） 1. darknetをMacにインストール 2.
「Python自然言語処理入門」が自然言語処理の基礎にとても良かった - karaage. [からあげ]
Python自然言語処理入門を読みました 以前レビューを書いた「ディープラーニングの数学」の作者、IBMの赤石さんから、出版社様経由で「Python自然言語処理入門」を献本いただきました。 現場で使える! Python自然言語処理入門 (AI & TECHNOLOGY) 作者:赤石 雅典,江澤 美保出版社/メーカー: 翔泳社発売日: 2020/01/20メディア: 単行本（ソフトカバー） 「ディープラーニングの数学」は、「ゼロから作るDeep Learning」に並ぶ良書と書かせていただきましたが、今回の本も自然言語処理を扱ったゼロから作るシリーズの「ゼロから作るDeep Learning ❷ ―自然言語処理編」と対になるような位置付けの良い本と思いました。 じっくり読んでいたので、読了に時間がかかってしまい、本の発売から時間が経った今更のレビューになってしまいましたが、簡単に紹介をしたい
![「Python自然言語処理入門」が自然言語処理の基礎にとても良かった - karaage. [からあげ]](https://cdn-ak-scissors.b.st-hatena.com/image/square/c4815e772b700227360cc4bcb53c62fcb2271132/height=288;version=1;width=512/https%3A%2F%2Fcdn-ak.f.st-hatena.com%2Fimages%2Ffotolife%2Fk%2Fkaraage%2F20200112%2F20200112201529.jpg)
Google APIとPythonで低コストRPA -はじめに- - Qiita
以下の投稿は、自社でOSSとPythonを組み合わせてRPAを実施したシステムエンジニアが感じた、RPAの現状の問題とその解決策の概要です。また、あくまで個人的な意見です。 低コストRPAを試みた背景 エンジニアの現場に止まらず、近年ではRPAを駆使した業務改善が試みられています。職場にもよりますが、RPAの一般的なプロセスとしては以下のようになると思います。 (RPAのプロセス) 現在の業務内の課題の洗い出し 業務内容の改善とRPAツール適用の要件定義/設計 RPAツール内の開発/セットアップ RPAツールの運用/保守 プロセスの2段目から出てくるRPAツールのPackageとして、有名なものは様々なものがあり、書籍も多く発行されています。 私の現場でもこれらを導入することを検討しましたが、以下の理由からこれらのRPAツールを導入することが一旦見送られました。 (RPAツールの問題) 問
googletrans
Googletrans is a free and unlimited python library that implemented Google Translate API. This uses the Google Translate Ajax API to make calls to such methods as detect and translate. Compatible with Python 3.6+. For details refer to the API Documentation. Features Fast and reliable - it uses the same servers that translate.google.com uses Auto language detection Bulk translations Customizable se
Google Colaboratoryを使えば環境構築不要・無料でPythonの機械学習ができて最高 - karaage. [からあげ]
Google Colaboratoryが便利 最近、Google Colaboratoryがちょっと気になっていたのですが、タダケン (id:tadaken3)さんの以下記事に分かりやすく使い方が書いてあったのをきっかけに試して見ました。 結論から言うと、これ良いですね。Google Colaboratoryには以下の特徴（利点）があります。 ローカルPCに必要なのはブラウザ（Google Chrome）のみ クラウド上にPython環境がありPython2/3 両方使える 機械学習に必要なライブラリは、ある程度プリインストールされている（numpy, matplotlib, TensorFlow等） 必要なライブラリは !pip installでインストールできる 日本語フォントも（ちょっと工夫すれば）使える 無料で使える。なんとGPUも12時間分を無料で使える！ これ死角無さすぎでは…
![Google Colaboratoryを使えば環境構築不要・無料でPythonの機械学習ができて最高 - karaage. [からあげ]](https://cdn-ak-scissors.b.st-hatena.com/image/square/12d034f86e09df35a63668f147c936d96829c380/height=288;version=1;width=512/https%3A%2F%2Fcdn-ak.f.st-hatena.com%2Fimages%2Ffotolife%2Fk%2Fkaraage%2F20180317%2F20180317160922.png)
Google スプレッドシートをpythonで操作する - Qiita
Abstract Google スプレッドシートをpython用ライブラリgspreadを通して読み書きします．流れはよくまとまった記事に書かれている感じです． 下準備 全体的に先人の記事の劣化コピーです． APIの有効化 まずGoogle Developers Consoleで適当にプロジェクトを作成します（今回はtestとします）．ダッシュボードからAPIとサービスの有効化をクリックしてGoogle Sheets APIを有効にしましょう． OAuth用クライアントIDの作成 「認証情報」→「新しいクライアントIDを作成」→「サービスアカウント」を選択して「クライアントIDを作成」しましょう．サービスアカウントが初めての場合は新しいサービスアカウントでサービスアカウント名を入力しましょう(役割はよくわからなかったのですが役割なしで作成できたので今回は役割なしでいきます)．jsonファイ
ビッグデータ解析で『TikTok』現象を丸裸にしてみた！ - 世界一TikTokを愛する男のブログ
私はTikTokが大好きだ。今まで、TikTokで数千人以上のファンを獲得するまでやりこんだり、小中学生に混じって有名Tiktokerさん（成瀬さん）の握手会・撮影会に参加してみたり、流行の最先端にいる数々のTiktokerさんの憧れの的であるDJ社長・レペゼン地球のライブにも潜入したり、渋谷ハロウィーンのTikTok現象を自分の目で確認したりと、様々な角度からTikTokの最新情報を独自に収集し、誰よりも深くTikTokを理解できるよう努めてきた。しかし残念ながら、これらの事柄はすべて私のバイアスのかかった主観的な体験談に過ぎない。 そこで今回の記事では、大量のサンプル数に基づくビッグデータ解析を行い、『TikTok』現象を定量的な観点から丸裸にすることにチャレンジしてみた。具体的には人類の集合知と呼ばれるWikipediaデータ（Wikipedia Page View Statisti
ビジュアルプログラミング・エディタのBlocklyをプログラムする - Qiita
はじめに 世の中には数多のプログラミング言語がありますが、テキストではなくブロックなどのオブジェクトを組みたててプログラミングをする、ビジュアルプログラミング言語というジャンルがあります。 ビジュアルプログラミング言語には、データフローやビジネスプロセスモデリング1に特化したものもありますが、教育目的で利用されるScratchという言語の名前を聞いたことがある人もいらっしゃると思います。または、Hour of Code2という、コンピューターサイエンスが身近で楽しいことを伝える世界的な活動をご存知かもしれません。 Scratchライクなビジュアルプログラミング・エディタが簡単に作れるBlocklyを使うと、ビジュアルプログラミング環境をかんたんに作ったりカスタマイズすることができます。Hour of Codeの教材のcode.orgも、Blocklyを利用しています。 Blocklyの日本
sphinx.ext.napoleon – NumPy および Google スタイルの docstring をドキュメントに取り込む — Sphinx 1.5.6 ドキュメント
Napoleon - Marching toward legible docstrings¶ 以下のようなdocstringを書こうとしてみたことはあるでしょうか。 :param path: The path of the file to wrap :type path: str :param field_storage: The :class:`FileStorage` instance to wrap :type field_storage: FileStorage :param temporary: Whether or not to delete the file when the File instance is destructed :type temporary: bool :returns: A buffered writable file descriptor :rtyp
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
GoogleがPython用ファジーテストツールAtherisをオープンソースとして公開
Google IT Automation with Python
Googleではどこのどんな部分をPythonで書いていますか?
Blockly | Google for Developers
