【AWS】Amazon S3にSFTPでアクセスしたい（Mountpoint for Amazon S3）
はじめに S3バケットへのSFTP接続をする手段として、「AWS Transfer for SFTP」が用意されていますが、若干料金が高いです。なるべくコストを抑えつつ実現する方法を模索していたところ、「Mountpoint for Amazon S3」が使えそうだったので、検証してみます。 AWS Transfer for SFTP とは SFTP、FTPS、FTP プロトコルを使用して、Amazon S3 および Amazon EFSに直接ファイル転送できます。AWSのマネージドサービスのため、サーバ管理は不要、可用性とパフォーマンスについても申し分ないでしょう。 コストが許すならこちらを使いたいところですが、個人的には安くない料金です。 2023年9月時点の料金で月額を試算すると以下のようになります。 0.30 USD × 24 時間 × 30 日 × 147 円 = 31,752
Amazon API Gateway は何をしてるのか | DevelopersIO
アプリケーションをユーザに公開する場合, それがGUIであってもCUIであってもインタフェースが必要になります. Webアプリケーションを公開する場合にはWeb APIを利用するのが一般的であり, AWSもAPIをフルマネージドで活用するためのAPI Gatewayを提供しています. 非常に簡単に活用できるのですが細かい機能などを今一度洗い直す機会があればと思っており, 社内勉強会の機会があったのでAPI Gatewayについて話しました. 今回の記事では社内向け勉強会で登壇した内容をブログ向けに再編しています. 資料はSpeakerDeckで公開していますが, 内容についてより細かくこのブログで説明しますので, 是非ご閲覧ください. What is API まず最初にAPIが何かを確認します. 大雑把に伝えるとアプリケーションが呼び出せば予期した結果を返されるような仕組みです. 名前にあ
AWSが、Elasticsearchのコードにはプロプライエタリが混在しているとして、OSSだけで構成される「Open Distro for Elasticsearch」を作成し公開
AWSは、オープンソースの高速な検索エンジンとして活用されている「Elasticsearch」の独自ディストリビューション「Open Distro for Elasticsearch」を公開しました。 Elasticsearchはオランダに本社を置くElastic社が中心となり、オープンソースとして開発されている検索エンジンです。 検索エンジンのライブラリとして開発されているApache Luceneをコアとし、分散処理機能やマルチテナント機能、分析機能などを備えスケーラブルで高速な実行を可能とし、RESTful APIやSQLによってクエリを発行できるなど、多くの優れた特徴を備えています。 ログ解析による運用監視やセキュリティインシデントの発見、データ分析など多数の実績を持つ、この分野でもっとも人気のあるソフトウェアの1つであり、AWSもマネージドサービス「Amazon Elastics
AWS FargateとLambdaでサーバーレスなクローラー運用 - orangain flavor
これはWebスクレイピング Advent Calendar 2017の7日目の記事です。こんな感じでAWS FargateとAWS Lambdaを使ってサーバーレス（EC2レス）なクローラーを作ります。 この記事はFargateでのクローリング処理にフォーカスしており、クロールしたHTMLをS3に保存するところまでを主に解説します。Lambdaの方はおまけ程度の扱いで、スクレイピングしたデータの扱い（データベースへの格納など）はスコープ外です。 長くなったので目次です。 背景 AWS Fargateの登場 クローラーの構成 やってみる 1. ScrapyのプロジェクトでSpiderを作る 2. Scrapy S3 Pipelineをインストールする 3. Scrapy S3 Pipelineをプロジェクトに追加する 4. ScrapyのプロジェクトをDockerizeする 5. Amazo
【速報】Amazon EC2 ベアメタルインスタンスが発表されました！ #reinvent | DevelopersIO
こんにちは、菊池です。 またしてもAWSの世界が拡張されました！ただいまre:Invent 2017で開催されている、Tuesday Night Liveにて、Amazon EC2 ベアメタルインスタンスが発表されました！ Amazon EC2 Bare Metal Instances with Direct Access to Hardware ベアメタルインスタンス ベアメタルインスタンスでは、AWSインフラのハードウェア上で直接OSを起動し利用することができるようです。 i3.metalインスタンス CPU：Intel Xeon E5-2686 v4 2.3 GHz x2、36 HT コア (72個の論理プロセッサ) メモリ：512 GiB ストレージ：15.2TB NVMe SSDローカルストレージ ネットワーク：25 Gbps ENA拡張ネットワーキング プレビュー受付 EC2
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
