科学を変えた10のコンピューターコード | Nature ダイジェスト | Nature Portfolio
Fortranからプレプリントアーカイブまで、プログラミングとプラットフォームの進歩は、生物学、気候科学、物理学を新たな高みへと導いた。 2019年、イベント・ホライズン・テレスコープ（EHT）のチームは、ブラックホールの実際の姿を初めて世界に見せてくれた。彼らが発表したリング状に輝く天体の画像は、従来の写真とは違い、計算によって得られたものだ。具体的には、米国、メキシコ、チリ、スペイン、南極点の電波望遠鏡が捉えたデータを数学的に変換することによって得られたのだ1。研究チームは、その知見を記載する論文とともに、ブラックホールの撮影に用いたプログラミングコードも公開した。科学コミュニティーが自分たちのやり方を確認し、それを足場にできるようにするためである。 このようなパターンは、ますます一般的になりつつある。天文学から動物学まで、現代のあらゆる偉大な科学的発見の背後にはコンピューターがある。
弊社Nucoでは、他にも様々なお役立ち記事を公開しています。よかったら、Organizationのページも覗いてみてください。 また、Nucoでは一緒に働く仲間も募集しています！興味をお持ちいただける方は、こちらまで。 シェルスクリプトの世界へようこそ！ シェルスクリプトって何？ シェルスクリプトは普段 Bash などのシェルで実行しているコマンドを並べて、まとめて実行できるようにしたものです。ファイルのバックアップ、ログファイルの解析、システムのセットアップなど、ターミナルで行っていた一連の作業をまとめてシェルスクリプトに記述することで、シェルスクリプトを実行するだけで自動的に一連の作業を終わらせることができるようになります。また、シェルスクリプトはファイルに保存することになるため、再利用するのも簡単になります。 シェルスクリプトで使うコマンドの多くは UNIX コマンドになると思います
SRE実践の手引 ─ 信頼性をどう制御するか？ から始める、現実的な指標と目標の設計と計測 - エンジニアHub｜Webエンジニアのキャリアを考える！
SRE実践の手引 ─ 信頼性をどう制御するか？ から始める、現実的な指標と目標の設計と計測 SREの役割には、信頼性、SLIとSLO、エラーバジェット、トイル、ソフトウェアエンジニアリングといった複数のキーワードが存在するがゆえ、なかなかうまく実践できない、という声もあります。本稿では、難しく見られがちなSREの内実を、「信頼性の制御」というコンセプトを軸に整理し、小さく始める一歩を坪内佑樹（ゆううき）さんが解説します。 こんにちは。SREの研究者をやっているゆううき（@yuuk1t）です。 SRE（Site Reliability Engineering）は、従来のオペレーションエンジニア、システム管理者（sysadmin）と呼ばれる人々が担っていた技術領域の新しい形です。Googleによって提唱され、日本国内でも2015年ごろからWebコンテンツ事業者のコミュニティを中心に広く知られる
最近の開発者が最も好むドキュメント形式を挙げるとしたら断然マークダウンになるでしょう。マークダウンは、GitHub、GitLab、Bitbucketなど、タスクやイシュー管理に対応するほとんどのサービスにおいて、基本のドキュメント形式として使用されています。また、IntelliJ、VSCode、Vim、Emacsなど、ほぼすべてのテキスト編集ツールでも、プラグインを通じてマークダウン文書の強調構文やプレビュー機能を使用することができます。 TOAST UI Editorはここからさらに一歩進んで、マークダウンエディターとウィジウィグエディターを統合した形式のインターフェースを提供しています。ウィジウィグエディターを使用すると、テーブルなどの複雑な文法をより直感的に簡単に編集することができ、マークダウンに慣れていないユーザーでもマークダウン基盤の文書を簡単に編集できます。特に、開発者と非開発
【シンエヴァネタバレ解説】残酷な天使のように 少年よ宇部興産のすごい技術者になれ｜アラスカ４世
記事の中で映画、ゲーム、漫画などのネタバレが含まれているかもしれません。気になるかたは注意してお読みください。 この記事では宇部興産という企業に注目しつつ、『シン・エヴァンゲリオン劇場版』の新しい作品解釈を提示します。記事の約６割が宇部興産の説明、残りがエヴァの感想と解釈で構成されています。 筆者が宇部興産に着目した経緯初見で釈然としなかった部分 映画の前半の主な舞台は第三村という名前の村だ。シンジ、綾波、アスカは放浪の末にこの村にたどり着く。前近代的な手作業による農業を主産業とするこの奇怪な村で、綾波が農作業や挨拶を通じて社会性を高めたり、シンジが鬱状態から立ち直ったり、トウジなどのキャラクターが登場したり、心温まる（？）エピソードが続く。 しかし結局補給を受けられない綾波はポンジュースになってしまう。アスカは「村は守る場所であって居場所ではない」と言って最初から最後まで村の人々や村での
Amazonが展開するクラウドコンピューティングサービス「Amazon Web Services(AWS)」は企業の規模に関係なく利用可能で、使い方によっては業務の効率化やコストの大幅削減が可能です。一方で、環境によってはAWSを使うとコストが増加してしまう場合もあります。アクセス解析システムを開発する「Ahrefs」は、AWSを使わないことで3年間で4億ドル(約527億円)以上の節約に成功しているとのことです。 How Ahrefs Saved US$400M in 3 Years by NOT Going to the Cloud | by Efim Mirochnik | Mar, 2023 | Ahrefs https://tech.ahrefs.com/how-ahrefs-saved-us-400m-in-3-years-by-not-going-to-the-cloud-89
こんにちは！逆瀬川 ( https://twitter.com/gyakuse ) です！ 今日は契約書の更新差分の比較をGPT-3とGoogle Document AIを使ってやってみたいと思います。 概要 異なるバージョンの契約書をPDF解析システムとGPT-3を使って自動的に比較し、リスクなどの検討も自動で出力する仕組みを作る。 Colab 使い方 Document AIの準備 (作成方法など詳しくは後述) Google CloudのDocument AIでプロセッサを作成する プロセッサ一覧から作成したプロセッサを選び、予測エンドポイントをコピーする https://console.cloud.google.com/ai/document-ai/processors json形式のAPIキーファイルをダウンロードしておく OpenAI APIキーの準備 すべてのセルを実行 比較した
2021/10/22追記：最新版は下記記事になります！こちらもご一読くださいませ。 tech-blog.abeja.asia どうも、Tech Blog編集長(自称)の緒方(@conta_)です。 よくエンジニアの方にご質問いただく ABEJAってよく聞くけど、実際どんなことやってるのかよくわからない という点をクリアにするために、事業内容と技術視点でのABEJAの取り組みを紹介したいと思います。 ABEJAに興味のある方や、未来の一緒に働くメンバーに読んでいただけると嬉しいです！ 割とAIコンサルの会社と思われているらしいので、ちゃんとプロダクト作ってますよ！ということを伝えていきたい ABEJAの事業紹介 ABEJAは2012年から約7年間、機械学習・ネットワークやIoTデバイスを活用したプロダクトの研究・開発・運用を行っています。 様々な産業・業種へ機械学習の適用・運用を培ってきたナ
2024年7月17日、東京ガスおよびグループ子会社の東京ガスエンジニアリングソリューションズは、不正アクセスにより同社が保有する顧客情報などが流出した可能性があると公表しました。流出の可能性のある情報には委託元より提供を受けている情報も対象となっていることが明らかにされています。これを受け委託元の組織からも相次ぎ関連する公表が行われています。ここでは関連する情報をまとめます。 VPN機器を介して不正アクセス 不正アクセスが確認されたのは東京ガスエンジニアリングソリューションズ（以降TGES社と表記）の社内ネットワーク。TGES社ネットワーク上での不正アクセスを検知し調査を進めていたところ、特定のファイルサーバーへアクセスが可能な複数の従業員のクレデンシャル情報（IDとパスワード）が窃取されていた事実が判明した。（不正アクセスがいつ頃から行われていたのかは調査中ためか2社公表での説明はない。
空前のボカロブーム！知っておきたいボカロP10選
はじめに米津玄師やYOASOBIのAyaseといったボカロ発のアーティストが注目され、ボカロ音ゲーのプロセカがヒット、Vtuberはこぞってボカロ曲をカバー、tiktokでもボカロ曲が普通に使われている(らしい)というこの2021年。 有名ボカロPを10人ぐらい紹介します。チョイスも順番も適当です。 代表曲は最近のヒットとそれ以外で一番人気な曲の2曲にしていると思います。 再生数はニコニコ動画の再生数です。 再生数ごとの曲数とイメージはかなりざっくりですが以下のような感じなのですごさの参考にしてください。 例えば100万再生以上の曲は20万曲中600曲という読み方をしてください。再生数曲数イメージ1000万6曲神話入り・みくみく千本桜メルトマトリョシカWEDHモザイクロール500万60曲超有名100万600曲伝説入り・文句なしに有名50万1000曲ボカロ好きなら少なくともPか曲名は知ってる
NECなど3社は2月18日、データを暗号化したまま分析する「秘密計算」の普及を目的として「秘密計算研究会」を立ち上げたと発表した。発足時の参加企業はNEC、デジタルガレージ、ソフトウェア開発企業のレピダム（東京都渋谷区）。関連企業や研究機関などと協力し、技術の評価基準作りや情報発信に取り組む。 暗号化したデータは通常、一度復号しないと計算処理ができない。秘密計算は暗号化データのまま統計分析などを行える技術で、機密性の高いデータをクラウドサービスや複数の組織間などで安全に扱う方法として期待されている。 一方で秘密計算には「秘密分散」や「準同型暗号」など多数の方式が存在し、それぞれ独立に研究開発が進められてきたという。そのため、安全性や性能などを評価する基準が存在しなかった。NECらはこうした状況が社会実装の妨げになっているとして、研究会を立ち上げた。 秘密計算はさまざまな分野で活用が期待され
久々に溜まったブログネタ放出をしようかなと、その前に下書きから掘り起こしてきた、いまさらなスロークエリ関連で準備運動です。 RDSのスロークエリ情報は当然、集計を自動化していつでも見れるようにしてあるのですが、ちょいと必要があったので、今回はあえて単発ログを集計する形に切り出したものを用意してみました。 スロークエリログの必要性 最近はNewRelicとかで、アプリケーションの処理を分別して処理時間などを集計するので、それで課題となるクエリを確認したりもします。 非常に便利な仕組みですが、アプリケーション外のジョブなどが実行したクエリは集計されないことや、負荷試験で課題を炙り出すときだとテスト環境にエージェントやライブラリを仕込む必要がある、といったデメリットとまでは言わないまでも面倒さがあります。 その点、スロークエリはサーバー側で記録するものなので、0.1秒とかでONにしておけば、対象
アメリカン・ベースボール革命: データ・テクノロジーが野球の常識を変える 作者:ベン・リンドバーグ,トラビス・ソーチック化学同人Amazon 本書は「マネー・ボール」に始まるメジャーリーグにおける数理統計やデータサイエンスの応用の最新動向を扱った本になる．著者はベン・リンドバーグとトラビス・ソーチック．いずれもジャーナリストで，ソーチックは「ビッグデータ・ベースボール」の著者でもある． メジャーリーグにおける本格的な数理統計の応用は「マネー・ボール」で紹介されたセイバーメトリクスの利用から始まる．これは選手の能力や貢献を測るためには伝統的な成績指標（打率，打点など）よりも有効な指標（長打率，出塁率など）があることを理解し，フリーエージェント市場で割安に選手を調達し，強いチームをつくることを目指したものだ．しかしこの手法の有効性が多くの球団に認められると優位性はなくなる．次に現れたのは「ビッ
こんにちは、2z（Twitter： @2zn01 ）です。 趣味でWebサービスの個人開発をしており、以下のサービスを開発・運営しています！ ■AIメーカー https://aimaker.io/ → 誰でも簡単にAIを作れるサービス ■ツイレポ https://twirepo.com/ → キーワードで話題のツイートを自動で収集したり、自動でリツイート・フォローができるサービス ■文字起こすくん https://text.aimaker.io/recognize-bot/ → 画像、音声、動画をアップするだけで簡単に文字起こし・書き起こしできるサービス 今回作ったもの 動画をアップロードするだけで、動画内の音声を認識して文字起こしを行い、自動で動画に字幕・テロップをつけてくれる「テロップメーカー」というサービスをリリースしました！ ■URL https://text.aimaker.io
数千人規模の自社イベントで顔認証活用サービスを作ってデリバリーした話 (ABECOIN) - ABEJA Tech Blog
はじめに こんにちは、ABEJAの大田黒(おおたぐろ)です。最近は、一ヶ月100kmを目標にランニングしたり、POとユカイな仲間たちと一緒に小売店舗向けのIoTxAI活用サービスの開発を進めているエンジニアです。前回の記事からだいぶ間が空いてしまいましたが、久しぶりにTech Blogを執筆しようと思います！ ちなみに前回は、IoTを活用したインフルエンザ注意報を作って社内展開をしていた様子等を書いてました。 tech-blog.abeja.asia 今私は、小売店舗向けのIoTxAI活用サービス であるABEJA Insight for retailの開発チームリーダーをさせていただいております。先日、我々のチームで研究＆開発している技術を活用し、顔認証でマイニング＆簡易決済が可能な仮想コイン(仮想通貨ではない)を個人の冬休みの自由研究として作りました。(詳しいコンセプトや仕組みは後述し
NETGEAR社製ルーターにおける認証不要の任意コード実行の技術的解説(PSV-2022-0044) - Flatt Security Blog
※本記事は先立って公開された英語版記事を翻訳し、日本語圏の読者向けに一部改変したものです。 画像出典: https://www.netgear.com/business/wifi/access-points/wac124/ はじめに こんにちは、株式会社Flatt Securityのstypr(@stereotype32)です。 一昨年、日本のOSS製品で発見された0day脆弱性に関する技術解説をブログに書きました。 それ以来、私は様々な製品に多くの脆弱性を発見してきました。残念ながら私が見つけたバグのほとんどはすぐに修正されなかったので、今日まで私が見つけた、技術的に興味深い脆弱性の情報を共有する機会がありませんでした。 本記事では、NETGEAR社のWAC124(AC2000)ルーターにおいて、様々な脆弱性を発見し、いくつかの脆弱性を連鎖させて、前提条件なしに未認証ユーザーの立場からコ
Palantirが想像以上にSIerだった件｜ミック
ソフトウェア企業のIPOとしては史上最高額をつけたSnowflakeをはじめとして、Asana、Sumo Logic、Unityなど、2020年の秋はコロナ禍を受けた前半の鬱憤を晴らすかのように、ソフトウェア企業のIPOラッシュとなった。多くがクラウドの機動性を活かしたモダンなSaaSで、スケーラビリティのあるビジネスモデルで急成長を遂げた企業である。その中に一社、異彩を放つ企業がある。 Palantir – Paypal創業者ピーター・ティールが率いるデータ解析企業である。Palantirは、その極端な秘密主義とペンタゴンやCIAとの強い結びつきによって、様々な「神話」のヴェールを纏っている。ビンラディンの居場所を特定するのに決定的な役割を果たした（Palantirはこの噂を否定も肯定もしていない）とか、バーニー・マドフの逮捕に貢献したというのは、よく語られるエピソードだ。 Palant
警察庁は、容疑者側の会員制交流サイト（SNS）を人工知能（AI）で解析し、人物の相関図を作成する捜査システムの導入を決めた。関係者が29日明らかにした。SNSは特殊詐欺などで多数の関与者をつなぐ「犯罪インフラ」として使われている側面があり、指示役を含む組織の全体像を解明、摘発に結び付ける考えだ。 年内に警察庁と警視庁などの5都府県警で運用を始め、全国の警察に広げる方針。捜査員らによる解析に比べ、幅広く効率的に情報収集できるという。 5都府県警以外の警察本部は導入まで警察庁に解析を依頼する。複数の警察にまたがる事件でも同庁のシステムを使う。
閉幕した東京五輪・パラリンピックでは金メダル候補を破るシーンが注目を集めたなか、熱戦を撮る報道カメラで躍進したメーカーがある。ソニーグループだ。2強のキヤノンとニコンに風穴を開けた。武器は性能を高めたシャッター音がしないミラーレスだ。運営面でも映像解析システムがテニスや陸上など約10競技で審判の判定を支えた。選手の骨格の動きまでデータにすることで、競技力の向上や映像の新たな楽しみ方を開拓する。
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
【永久保存版】シェルスクリプト完全攻略ガイド - Qiita
新しいマークダウンパーサーが必要な理由 | NHN Cloud Meetup
AWSを使わないだけでサーバー代を500億円以上節約できた実例
契約書の差分比較をGPT-3を使って自動化する - Qiita
ABEJAの技術スタックを公開します (2019年11月版) - ABEJA Tech Blog
東京ガスエンジニアリングソリューションズへの不正アクセスについてまとめてみた - piyolog
NECら3社が「秘密計算研究会」立ち上げ データを暗号化したまま計算する技術の評価基準策定へ
PythonでMySQLのスロークエリログを集計 | 外道父の匠
書評 「アメリカン・ベースボール革命」 - shorebird 進化心理学中心の書評など
【個人開発】動画の字幕・テロップ入れをAIで自動化するWebサービスを作りました - Qiita
警察庁SNS解析システム導入へ AI捜査で人物相関図作成 ｜ 共同通信
ソニーの報道カメラ、五輪・パラで躍進 2強に風穴 - 日本経済新聞