Databricks情報を手に入れろ！？Databricks関連書籍やウェブ上のポインタなど（長い）
こんにちわ！Databricksはじめたいけど情報が、、、ない、、、？という方？あるよー！ここにあるよー！ というわけで、Databricks関連情報をまとめていきたいと思います。 書籍 まずはこれ「データブリックス-クイックスタートガイド」Databricksとはなぜ生まれてきたのか、どういうアーキテクチャなのか、といった最初の一歩がうまく書かれている本です。 Unity Catalogなどが入る前の本なので若干古いのですが、アーキテクチャの思想や基本的な部分についてはわかりやすいのでぜひ。僕もここから入りました。 つぎはこれ、「Apache Spark 徹底入門」、Apache Sparkの書籍ですが、Databricksの情報も入っております。まずは基本となるSparkの知識を仕入れつつDatabricksの情報も仕入れていきましょう！ 同人誌 有志の方々が出版されているDatabr
OSSプロジェクト「Devika」登場 全自動でゲームもつくれる完全自律型AIエンジニア「Devin」超え目指す【技術紹介】
AIソフトウェアエンジニアを提供するオープンソースのプロジェクト「Devika」がGitHubで公開された。これはAIベンチャー「Cognition」が開発し2024年3月12日に公開した、ソフトウェア開発のための自律型AIエンジニア「Devin」をモデルに、オープンソース版の提供を目指すプロジェクトだ。 Devinは、従来の大規模言語モデル（LLM）やコーディング特化型モデルが実行可能。テキストからのコード生成やバグの特定などの作業支援だけではなく、ゲームなどのソフトウェア開発が全自動でできるとの特徴を持つ。 keyboard_arrow_down プロジェクト背景 keyboard_arrow_down プロジェクト内容 Devinは、独自のコマンドライン、コードエディター、ブラウザを持ち、APIドキュメントを参照しながら、開発プロジェクトを自律的に構築する。エラーが発生した場合は、デ
最近気に入っているOSSを淡々と紹介する
はじめに こんにちは〜！皆様いかがお過ごしでしょうか？ no plan inc. CTOの @serinuntius です。 これはno plan inc.の Advent Calendar 2023の22日目の記事です。 最近気に入っているOSSとかを作者様に感謝しながら、スターを送りながら、こんなのを使用してるぜって紹介する記事です。 「OSSは使っていることを公言するだけでも貢献になる」とsongmuさんが言っていたので、私も貢献したいと思います。 紹介する順番に特に意味はありません。 rtx 個人的お気に入り度: ★★★★★ スター数: 3700 Rustで作られている💯 LICENSE: MIT 初っ端は、rtxです。あらゆるプログラミング言語環境(Runtime)のマネージャーです。 公式のデモ画像を見ていただくのが一番早いと思います。 私はこれを使う前はanyenvというも
IIJ、社内開発した文書共有アプリをOSSとして無償公開
印刷する メールで送る テキスト HTML 電子書籍 PDF ダウンロード テキスト 電子書籍 PDF クリップした記事をMyページから読むことができます インターネットイニシアティブ（IIJ）は5月25日、社内開発した文書共有のウェブアプリケーション「cats_dogs」（キャッツ・ドッグス）をオープンソースソフトウェア（OSS）として、GitHubで無償公開した。文章ごとに異なるアクセス権限を設定できるという。 cats_dogsは、同社のエンジニアが業務改善のために開発したもの。Markdownを採用しており、グループやプロジェクトチームでの利用を想定して、複数人が参照する文書を効率的に共有、管理することを目的にしているという。1つの文書内において文章ごとに異なるアクセス権限を設定できる。参照者の権限に応じて特定の文章を特定の人にだけ表示、閲覧させることができるとしている。 また、ロ
【重要】学習・開発で必ず確認するべきOSS
はじめに 今回の記事では、プログラマーが学習・開発を円滑に進めるために知っておきたいOSSを紹介する。特に開発されているアプリケーションに焦点を当てて紹介する。今回の記事では、主に著者の得意分野や興味のある分野に絞って確認するべきGitHubリポジトリを紹介する。 紹介する分野は主に以下の通り。 Web Android Flutter 学習・開発でOSSを使うメリット プログラマーが学習・開発でOSSを使うメリットは以下の通り。 ソースコードを通して、開発したいアプリケーションの具体的なイメージや自分に足りないもの(必要な知識や言語等のスキル)を理解できる 自分が普段学習・開発で使っている言語の活用事例を確認できる アプリケーションの構造や開発フローを理解できる 確認が必須であるWebサイト OpenSourceAlternative.to 世界中のオープンソースのアプリケーション(特に有
コンテナ／Kubernetesの脆弱性、機密情報、設定間違いが分かるOSS「Trivy」徹底解説～もうイメージスキャンだけとは言わせない
コンテナ／Kubernetesの脆弱性、機密情報、設定間違いが分かるOSS「Trivy」徹底解説～もうイメージスキャンだけとは言わせない：Cloud Nativeチートシート（17） Kubernetesやクラウドネイティブをより便利に利用する技術やツールの概要、使い方を凝縮して紹介する連載。今回は、コンテナ／Kubernetesの脆弱性、機密情報、設定間違いを診断、検出するOSS「Trivy」を紹介する。 OSパッケージやライブラリ、アプリケーションで発見される脆弱（ぜいじゃく）性は日々増え続けていますが、皆さんのアプリケーション、システムは大丈夫でしょうか？ 日々最新のバージョンに修正して脆弱性を対処していれば問題ありませんが、インターネット上に転がっているサンプルなどを参考して実装した場合、「記事で利用されている古いバージョンをそのまま使用して脆弱性が混入してしまっている」なんてこと
運用自動化、ツールの種類やOSS／商用の違いを問わない運用設計の作り方、進め方
ここまで進んだ運用自動化。サイロ化したシステム、手順をまず見直そう 「国内の運用自動化ツール市場は2012年ごろから活性化し始め、2013年には約915億円を記録した。これは約1000億円規模のデータベース市場に次ぐレベルであり、市場規模としてはかなり大きい。この背景として、以前は開発環境として使われることが多かった仮想環境が実環境として使われるようになり、多くの企業が“仮想環境に即した新しい運用管理スタイル”を模索し始めたことが挙げられる」 入谷氏はまずこのように市況を概観した上で、運用自動化ツール市場には大きく二つの分野があることを示す。 一つは従来からあるジョブスケジューリング、もう一つは、例えば仮想サーバーのプロビジョニングやインシデント対応の自動化など、「複数のツールを使って、複数のステップを踏む作業をポリシーに沿って自動化」するサーバーワークロードオートメーション／オーケストレ
OSS 版 API Gateway、Kong Gateway をつかってみる - Techtouch Developers Blog
バックエンドエンジニアの taisa です。テックタッチでは API Gateway として、AWS の API Gateway ではなく、クラウドでもオンプレでも使えるオープンソースの Kong Gateway を利用しています。この記事では Kong Gateway とは何か、なぜ使うのか、どうやって使うのか、を簡単にまとめてみました。 Kong Gatewayとは なぜ Kong Gateway を使うのか Kong Gateway をインストールできる環境 Kong Gateway の特徴 Kong Gateway の概念と機能 Kong Gateway のドキュメント Mac + DB Less（YML）環境で動かしてみる 構成 下準備 Kong をセットアップする kong.yml にサービスとルーティング情報を記述する Rate-Limit プラグインを利用する プロキシキャ
気になっているOSSとその周辺のリンク - Qiita
（前置きもなく始めます。） Kale Kubeflow Kale - Kubeflow Automated PipeLine Engine ML × Kubernetes といえば Kubeflow がとても有名です。 その中で、Kubeflow Pipelines というパイプラインを構築できる機能があるのですが、ぱっと見 DSL 書かなければいけないのがなんとなく心理的ハードルがありました。（ということで私は触ってないです。） Kale は Jupyter Notebook の cell metadata を利用して、Notebook から Kubeflow Pipelines のワークフローに変換してくれる OSS です。 コードを書き換えることなく、セル間の依存関係を UI で設定していくだけなのでとても楽です。 今日、ちょうどチュートリアルが投稿されていたので詳細はそちらをご覧く
無料で使えるプロキシサーバ/ロードバランサおすすめ20選 | OSSのデージーネット
プロキシサーバとは プロキシとは、クライアントとサーバの間に中継サーバとして配置するサーバのことです。プロキシは、クライアントから見た場合、サーバのように振る舞い、サーバから見た場合、クライアントのように振る舞います。クライアントアプリケーションは、プロキシへ通信を行い、プロキシはそのリクエストを受信し、受信したリクエストを本来送られるべきサーバへ転送するかのように送信します。サーバは、リクエストを送信してきたプロキシへ応答を返します。プロキシは応答に対応したクライアントに対して、応答を送信します。 プロキシサーバの種類 プロキシは、通信を中継するため通信内容をログに残したり、検査したり、書き換えたりといった処理が可能です。そのため、様々なプロトコルに対応した汎用的なプロキシと、アプリケーション（プロトコル）毎に特化した処理を行うソフトウェアがあります。 なお、Webプロキシは、HTTPプ
ReactOSまとめWiki - トップページ
2021年12月16日 ReactOS 0.4.14 がリリースされました。（公式ページ参照） 2020年4月10日 ReactOS 0.4.13 がリリースされました。（公式ページ参照） 2019年9月23日 ReactOS 0.4.12 がリリースされました。（公式ページ参照） 2019年3月4日 ReactOS 0.4.11 がリリースされました。（公式ページ参照） 2018年11月6日 ReactOS 0.4.10 がリリースされました。（公式ページ参照） 2018年7月23日 ReactOS 0.4.9 がリリースされました。（公式ページ参照） 2ちゃんねるのOS板の住人を中心とした有志が構築するReactOSのファンサイトです。MonaOSやZetaOS、HaikuやMenuetOSといったマイナーだけどそこそこの知名度があるOSに興味がある好奇心旺盛なあなたは、ぜひ参加してく
SlackからMattermostへ移行！比較結果とオススメポイントを解説 | jMatsuzaki
SlackからMattermostへ移行！比較結果とオススメポイントを解説 2018年12月30日投稿 カテゴリ：便利ツール 著者: jMatsuzaki 私の愛しいアップルパイへ 私たちは長らくチャットシステムとしてSlackを活用していました。ここは安息の地として永遠に平和が続くものと信じてやみませんでした。しかし、永遠なんてものはありませんね。 私たちは長らく愛用していたSlackから、SlackのOSSクローンとして名高いMattermostへと移行しました。 Slackは素晴らしいサービスでしたが、使い込んでいくうちに限界を感じるようになってきました。今日はSlackからMattermostへ移行した結果と、オススメポイントを解説します。 Mattermost公式サイト Slackと比較したMattermostのオススメポイント Mattermostは公式にSlackクローンを謳
Dockerで即実行できる、社内・自宅向けオープンソースWebアプリ - Qiita
デスクトップアプリケーションに比べるとWebアプリケーションの導入は面倒だが、DockerやVagrantの登場によって敷居が低くなっている。誰かがDockerHubへ使いやすいイメージを公開してくれたり、Webアプリの開発元がDockerfileを公式に提供しているケースが増えてきているためだ。 この記事では、筆者が実際に使用したことのあるWebアプリの一覧と、docker-composeの設定ファイル(またはDockerfile)をまとめる。既にDocker環境が整備されている状態であれば、YAMLファイルやDockerfileをコピペしてdocker-compose up -dするだけで自動的にWebアプリケーションが起動する。(もし動かなかったらスミマセン) セキュリティとかは考えていないので、LAN内のみでの使用を想定 記載の設定では、永続化データはDockerが動作しているマシ
第1回 Visual Studio Online "Monaco"を使ってみたい5つの理由 | gihyo.jp
オンラインで使えるコーディングツール Visual Studio Online "Monaco"の実力やいかに 今から1年前に開催さいれた「Visual Studio 2013 Launch Event」で新しいクラウド開発環境が発表されました。「Visual Studio Online "Monaco"」（以降Monaco）です。 Monacoは、Visual Studioの名が付いている通り、Microsoftが提供するツールの1つで、かつ、オンライン上、クラウドサービスとして動作する開発環境です。一番の特徴は、何と言ってもオンラインで利用できること。 これまで、Visual Studioは多くの.NET開発者に愛用されてきており、C#を利用したアプリケーション開発や、ASP.NETやSQL ServerによるWebシステムを開発する上では、欠かすことのできないツールでした。 一方
Sensu Serverをインストールする手順メモ - 元RX-7乗りの適当な日々
ゴールデンウィークに突入したタイミングで色々忘れてしまいそうなので、ここにSensu Serverの作り方をメモっておく。 ちなみに、Sensuは最近ナウなヤングにバカうけのモニタリングツール。インストールした環境は、CentOS 6.5 (Linux version 2.6.32-431.11.2.el6.x86_64)。 ちなみに、Sensu関連のインストールについてはChefやPuppetの使用が、推奨されてるっぽいので、今回はChefのCookbookをありがたく利用させていただいた。(このエントリではchef-soloを使って環境構築している。) SensuのChef Cookbookは以下のGitHubリポジトリで公開されている。 https://github.com/sensu/sensu-chef sensu-chefの取得 # yum install -y git gcc
Mac OS Xの高速起動メカニズムをOSSへ
GitHubに「Open Launchd」プロジェクトが追加された。Open LaunchdはMac OS Xのlaunchd(8)をFreeBSDへ移植することを目的にしており、最終的にはほかのBSD系オペレーティングシステムやLinux系オペレーティングシステムでも利用できるようにすることを目指している。システムの起動時間の短縮を実現できるほか、より包括的なプロセス管理が可能になるとされている。 Mac OS Xのlaunchd(8)は従来の仕組みでいえばinit(8)、rc(8)、cron(8)などを組み合わせたような作りになっている。カーネルが読み込まれたあとにカーネルによって起動され(init(8)に相当)、以降はシステムの起動処理を担当する(rc(8)に相当)。システム起動後はジョブ管理やユーザの使用するソフトウェア起動処理制御などに使われる(cron(8)に相当)。 /Use
OSSのゲームエンジン「Playground」のハッカソンに行ってきたよ - ひつじのにっき
11/2(土)、11/3(日)の2日間かけてKLabさんの開発したオープンソースのゲームエンジン「Playground」のハッカソンがあったので行ってきました（会場もKLabさん会議室）。 PlaygroundはAndroid&iOS両方に対応したゲームエンジンです。ソースコードは https://github.com/KLab/PlaygroundOSS で公開されていますがソースだけではいかんとも理解しにくいのでハッカソンで直接、どういうエンジンなのか聞いて手を動かしてきました。 Playgroundゲームエンジンとしては後発ながら2D,2.5Dのゲームに特化していて、既に音ゲーの「ラブライブ！」などで実績があります。そのため品質も（OSSのファーストリリースにしては）しっかりしてる印象でした（一般的な使い方での不具合は取れている）。またゲームを作ってて欲しいなぁ、と思う機能はたいてい
iOSとAndroidのネイティブアプリを同時に開発できる「Monaca」、アシアルがOSS化
アシアルは2012年9月6日、モバイルアプリ開発フレームワーク「Monacaフレームワーク」をオープンソースソフトウエア（OSS）として公開した。iOSとAndroid向けのネイティブアプリケーションを同時に開発できる。従来クラウド型開発プラットフォームとして提供してきた（写真）が、OSS化することでXcodeやEclipseといったローカルの開発環境上でも開発可能になる。 Monacaは、HTMLやJavaScriptでアプリケーションを開発できるフレームワーク。iOSとAndroid向けのアプリケーションを同時に開発できるフレームワークとしては米Adobe SystemsがOSSとして公開しているPhoneGapなどがあるが、「PhoneGapはiOSやAndroid向けのHTML5アプリを開発できるが、ユーザーインタフェースや動作速度の面において、ネイティブアプリケーションに見劣りす
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
KLab