OS徒然草 (1) - VA Linux エンジニアブログ
はじめに コンピュータのアーキテクチャ プログラムの構造 あとがき 執筆者 : 小田 逸郎 はじめに 筆者は自分のことを OS 開発者 (OS屋) だと思ってます。最近は、OSにあまり深く関われていないのですが、筆者が若かりし頃に情熱を注いだものであり、筆者の基盤をなしているものであることには間違いないです。 筆者が OS (UNIX) の開発に携わり始めたのは、1986年のことなので、もう40年近く経ってしまいました。その間に OS の規模も随分大きくなってしまったようです。 筆者が始めた頃の UNIX は、デバイスドライバを除くと、20K行くらいだったと記憶しています。 全コードをラインプリンタで出力、コピー、製本し、皆で読み合わせて、勉強会をしたりしていました。そんなことができる分量だったのです。 今の Linux の規模はどれくらいでしょうか。筆者たちが「Linuxカーネル 2.6
オープンソースAIがなぜ重要か — Llama 3.1リリースに寄せてマーク・ザッカーバーグが情熱的な投稿、歴史的な書簡となるか
7月24日、MetaはLlama 3.1を公開した。 それに合わせる形で、Meta社のCEO マーク・ザッカーバーグが、オープンソースAIの意義と重要性、そして未来像について語る書簡を発表した。 もしかすると、これがオープンソースAIの歴史的な転換点における重要な書簡と見なされる可能性もあると思い、以下に、その意訳を掲載する（※本文章は、元の文章からChatGPTによる出力と人手による編集を経て制作した）。 もし翻訳や解釈のミスがあったら、コメント欄でご指摘願いたい。 Open Source AI Is the Path Forward (オープンソースAIは、前進への道である） 2024年7月23日 マーク・ザッカーバーグ、創設者兼CEO ハイパフォーマンスコンピューティングの黎明期において、主要なテクノロジー企業はそれぞれ独自のクローズドソース版のUnixを開発することに多大な投資を行
CrowdStrikeが大規模障害対応のおわびにUber Eatsのギフト券10ドル分をパートナー企業やエンジニアに配布
by Wil C. Fry セキュリティソフトのアップデートエラーにより、世界で850万台のWindows PCがブルースクリーンを繰り返す大規模なインシデントを引き起こしてしまったCrowdStrikeが、謝罪としてパートナー企業やエンジニアにUber Eatsのギフト券10ドル(約1530円)分を配布していると、IT系ニュースサイトのTechCrunchが報じています。 CrowdStrike offers a $10 apology gift card to say sorry for outage | TechCrunch https://techcrunch.com/2024/07/24/crowdstrike-offers-a-10-apology-gift-card-to-say-sorry-for-outage/ CrowdStrike offers $10 Uber Ea
『WWDC24報告会＆テクノエッジ パーティー』イベントリポート。鹿島OPSODIS 1スピーカーの開発秘話も | テクノエッジ TechnoEdge
Appleは6月11日に、年次開発者会議「WWDC24（Worldwide Developers Conference 2024）」を開催しました。 これを受け、テクノエッジでは、現地で直接取材をしてきたITジャーナリストの本田雅一さんと石川温さん、そして弓月ひろみさんを迎えてWWDCを振り返る「WWDC24報告会＆テクノエッジ パーティー」を6月20日に開催しました。 この記事では、イベントの内容を簡単にまとめてお伝えします。 WWDC24振り返り イベントの前半では、弓月さんを司会に、現地取材をされた本田さんと石川さんのイベント報告が行われました。冒頭には、外部からは分かりづらい現地取材ジャーナリストの仕事についての解説も。 昔と違い、最近のWWDC基調講演は事前に収録した動画を流しています。これは現地でも同じで、Apple本社の中で大きなスクリーンをみんなで見ているのだとか。 であれ
terraform (plan|apply) in GitHub Actions | さくらのナレッジ
はじめに さくらインターネット SRE室の久保です。 今日は「terraform (plan|apply) in GitHub Actions」というタイトルで発表させていただきます。 今日発表する内容は、画像で表すと上図のようになります。誰かがPull Requestを送ると、それをもとにGitHub Actionsを動かし、Terraformのplanやapplyを動かして、自動的にTerraform管理下にあるリソースを更新してくれる、そういう仕組みを作ったという話です。 terraform (plan|apply)を実行する際のポイント Terraformのplanとapplyを実行する際のポイントとして、まず各種秘匿情報、具体的にはAPIキーなどが必要になるので、実行結果をチーム内で共有してレビューするのが結構面倒です。何らかの方法でAPIキーを共有して使うにしても、あるいは各自
TypeScript/JavaScriptの不要なコードを削除するツール「Knip」の紹介 - ベースマキナ エンジニアブログ
こんにちは、taroです！ 今回は、ベースマキナのTypeScriptのプロジェクトで不要なコードの検知・削除で使用しているKnipについて紹介します。 Knip とは Knipは、TypeScript/JavaScriptのコードベースの不要なコードを検出するCLIツールです。 以下が検出できる不要なコードの例です。 package.jsonのdependencies/devDependenciesの中で使われていないpackage exportされているがどこからもimportされていない変数、関数、型など 使用していないファイル その他、検出できる内容の一覧はこちらで確認できます。 またExperimentalな機能（2024年7月現在）として不要なコードの自動削除も可能です。 ちなみにTypeScript/JavaScriptの不要なコードの検出するツールではts-pruneも知ら
GitHubの削除されたリポジトリや非公開のリポジトリに誰でもアクセスできてしまうのは仕様通り
GitHubでは削除されていたりプライベートに設定されていたりするフォークやリポジトリに誰でもアクセスでき、さらにその動作が欠陥ではなく仕様通りであるとオープンソースセキュリティ企業のTruffle Securityがブログに投稿しました。 Anyone can Access Deleted and Private Repository Data on GitHub ◆ Truffle Security Co. https://trufflesecurity.com/blog/anyone-can-access-deleted-and-private-repo-data-github GitHubでの一般的なワークフローとして、「新しいフォークを作成する」「コミットする」「フォークを削除する」というものを考えてみます。 この時、削除したはずのフォークの中身を誰でも確認できてしまうとのこと。
6万5000人以上の開発者に「好きな言語」「好きなOS」「好きな開発環境」「好きなAI」を聞いた年次調査「2024 Stack Overflow Developer Survey」の結果が公開される
開発者のためのコミュニティ「Stack Overflow」が実施した年次調査「2024 Stack Overflow Developer Survey」の結果が公開されました。6万5000人を超える開発者が、コーディングやAI、使用および学習したいと考えるテクノロジーやツール、職場での体験などについて回答しています。 2024 Stack Overflow Developer Survey https://survey.stackoverflow.co/2024/ まず、回答者の最終学歴は以下の通りで、41％が学士号を、25.6％が修士号を取得しています。Stack Overflowは「開発者の66％が学士または修士の学位を持っているが、学校でコードを学んだ開発者は49％に過ぎない」とも指摘しています。 コードを学習するために最も優先する選択肢を問うた項目では、「その他のオンラインリソース
ECMAScript 2024で追加された、JavaScript開発者向けの新機能まとめ
7月23日、海外のエンジニア向けメディア「THENEWSTACK」が「What’s New for JavaScript Developers in ECMAScript 2024」と題した記事を公開した。この記事では、ECMAScript 2024の新機能について詳しく紹介されている。 以下に、その内容を紹介する。 ECMAScript 2024の新機能 WebAssemblyの相互運用性向上 ECMAScript 2024では、JavaScriptとWebAssembly間の相互運用性が大幅に改善された。Resizable ArrayBuffersの導入により、WebAssemblyのメモリが成長しても、JavaScript側で効率的にアクセスできるようになった。これにより、メモリの再割り当てや断片化の問題が解消される。 // Resizable ArrayBuffersの例 let
「iOS 17.4以降のiPhone」、サイバー諜報企業が手を焼くほどセキュリティが堅固 | GetNavi web ゲットナビ
イスラエルのサイバー諜報企業「Cellebrite」は、デバイスからデータを合法的に収集するソフトウェアを開発しています。その製品は世界各国に提供されており、米国では一部の政府機関がiOSデバイスのロック解除に使用しているそう。しかしそんな同社が、「iOS 17.4」以降をインストールしたiPhoneのロックを解除できないと海外で報じられています。 ↑iOS 17.4以降のiPhoneは簡単に破られない テック系メディアの404 Mediaが入手した文章によると、Cellebriteの製品のサポートマニュアルでは、iOS 17.4以降を搭載したiPhoneは「研究中」とされており、ロック解除ができないことが示唆されています。一方で、「iOS 17.1」から「iOS 17.3.1」を実行している「iPhone XR」および「iPhone 11」シリーズは、ロック解除に対応していると記載されて
Rustとpgvectorを使って、類義語の検索をやってみた
はじめに この記事は株式会社LabBase テックカレンダー Advent Calendar 2023 24日目の記事です。 株式会社LabBaseでエンジニアをしている渡辺創です。 今回は pgvector を使って、類義語の提案ができるか試してみたのでそれについて書いていきたいと思います。 背景 LabBase就職というサービスを提供しており、研究に取り組んでいる学生が研究概要を登録してくれています。研究を頑張っている学生を採用したい企業の方が研究内容と募集内容のマッチングによって、就職活動・採用活動を支援するサービスとなっています。 企業の人事の方が学生の研究内容をキーワードで検索するのですが、ユーザは自分の語彙の中でしか検索することができないので、その語彙を拡張する方法の1つとして、ユーザに類義語を提案しようと考えています。 類義語関連だとこちらの記事にも書いたので、ぜひ読んでみて
自社用LLM構築にむけて RAG評価ってどうやればいいの？ 最新フレームワーク「Auepora」をチェック
生成AIの推論精度向上を目的としてRAGの実装が進んでいますが、その性能を適切に評価することも重要です。複雑な評価プロセスに対応するために提案された「Auepora」と呼ばれる評価方法分析フレームワークを紹介します。
mizchiさんが語る、LLMでフロントエンド生成を自動化するポイントと課題
DenoでLLMを操作してフロントエンドのコードを生成する試みと、その中で作成したマークアップ自動化ツール、previsについて紹介します。 本記事は、TechFeed Experts Night#31 〜 フロントエンドアーキテクチャの現状と未来のセッション書き起こし記事になります。 イベントページのタイムテーブルから、その他のセッションに関する記事もお読み頂けますので、一度アクセスしてみてください。 本セッションの登壇者 セッション動画 「LLMによるフロントエンド生成自動化」というテーマで発表させていただきます、mizchiです。 皆さん、LLMは当然のように使っていると思います。会社の都合で使えない方もいるかもしれませんが、ChatGPTやCopilotなどがインフラになりつつあると感じます。ただ、エンジニアとしてはWeb UIではなくCLIで自動化したい、日々のタスクの一環として
グーグルが気象予測で新モデル、機械学習と物理学を統合
気象予測にAIと従来の物理学的手法のどちらが最も効果的かについては、気象や気候の専門家の間でも意見が分かれている。グーグルの研究者は、両者を組みわせることで、より低コストで正確な予測ができるシステムを発表した。 by James O'Donnell2024.07.24 12 この記事の3つのポイント グーグルが機械学習と従来手法を組み合わせた新たな気象予測モデルを構築 従来モデルよりも少ない計算能力で迅速に高品質な予測が可能 異常気象リスクの長期的モデリングへの使用が期待されている summarized by Claude 3 グーグルの研究者は、機械学習と従来の手法を組み合わせた新たな気象予測モデルを構築した。これにより、現在よりも遥かに安い費用で正確な予報が得られるようになる可能性がある。 「ニューラルGCM（NeuralGCM）」と呼ばれるこのモデルは、7月22日付けのネイチャー（N
Xのインプレゾンビを消すChrome拡張を使ってみた
大事な情報を見逃さないためにも。 Twitterが｢X｣となり、インプレッションに応じて報酬がもらえるように…なったのはいいけど、その弊害も起こっていますよね。そう、インプレッション稼ぎのためにポストにぶら下がって内容の無い投稿を連投するユーザー、いわゆる｢インプレゾンビ｣。 フォロワーの多いユーザーからのポストにぐわーっと群がってきて、返信ツイートが埋め尽くされてしまうため、大事な返信や有益な情報を見逃してしまう…といったことが問題視されています。 このインプレゾンビを非表示にできるChrome機能拡張｢X-zombie-killer｣を試してみました。 ｢X-zombie-killer｣でインプレゾンビ対策。結果は…？Image: 小暮ひさのり拡張機能はChromeウェブストアからインストール。その後Chromeを再起動。 Xを表示すると右上に機能のON／OFFボタンが表示されます。イ
アジア系に強い新世代動画生成AI「KLING」がやってきたので試した。実用性高く無料生成も可能、静止画KOLORSも使える（CloseBox） | テクノエッジ TechnoEdge
Soraに匹敵する高品質の動画生成AIとして注目を浴びながら、中国の携帯電話番号が必須だったことから世界中の羨望を集めていた、KLINGが一般ユーザーも利用可能になりました。 ログインにはメールアドレスだけでよく、Webサイトのklingai.comにアクセスします。アプリのインストールは不要。 主要機能は3つ。静止画生成（KOLORS）、動画生成（KLING）、そしてビデオ編集です。 毎日使えるクレジット（ポイントは）66。動画生成では10ポイントを消費します。 ■KLINGを使ってみた早速使ってみました。まずはImage to Video。プロンプトを入れて、プロンプトへの準拠レベルを調整。現時点では10秒の生成はできないため、5秒のみ。高品質モードも使えない状態です。 出来上がったのはこちら。さすがアジア系には強い感じで、不自然さはほとんどないです。Luma Dream Machin
エヌビディアのGPUカーネルモジュールのオープンソース化--「Linux」への影響を考える
Steven J. Vaughan-Nichols （Special to ZDNET.com） 翻訳校正： 川村インターナショナル 2024-07-24 07:30 いつからなのか思い出そうという気にならないほど長い間、「Linux」ユーザーは世界有数のグラフィックスプロセッシングユニット（GPU）企業であるNVIDIAを憎んできた。なぜかというと、他のすべての企業が自社のドライバーをオープンソース化した後も、NVIDIAは長年にわたりそれを拒否したからだ。また、Linuxカーネル開発者に対し、オープンソースドライバーの構築に必要なデータを提供しなかったため、Linuxユーザーは品質の劣るプロプライエタリーなドライバーを使い続けるしかなかった。そのNVIDIAがついに、自社のGPUドライバーコードをオープンソース化した。 「憎んできた」と書いたが、それほど強い言葉を使ったつもりはない。有
MetaがGPT-4超えのAIモデル「Llama 3.1」をリリース
Metaが大規模言語モデル「Llama 3.1」を2024年7月23日にリリースしました。Llama 3.1はオープンソースで公開されており、GPT-4やGPT-4oといった最先端のクローズドソースAIモデルと同等以上の性能を備えているそうです。 Llama 3.1 https://llama.meta.com/ Introducing Llama 3.1: Our most capable models to date https://ai.meta.com/blog/meta-llama-3-1/ Llama 3.1はパラメーター数「4050億」「700億」「80億」のモデルが用意されており、すべてのモデルが12万8000のコンテキストウィンドウを備えています。 パラメーター数4050億の「Llama 3.1 405B」のベンチマーク結果を「Nemotron 4 340B Instru
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Stability AI、単一動画からマルチアングル動画を生成できるAIモデル
アドビ、PhotoshopやIllustratorに生成AIの新機能
