[Groonga][全文検索]取り敢えずPDFを全文検索するシステムのための最少ステップ | アペフチ
Groongaで学ぶ全文検索 2016-03-25に行って来た。 今日は、仕事でPDFを全文検索できるようにしたいから話を聞きに来たという参加者がいたので、PDFを全文検索できるよう、Groongaのデータベースを作るまでをその場でやった。 まず、PDFを全文検索するために必要なことの概要を説明した。 全文検索できるようにするまでの概要 PDFを全文検索するには 全文検索できるようにするための準備（データベースの構築） データベースを使って全文検索をする という二段階が必要になる。 準備は、 PDFからテキストを抜き出す テキストをGroongaに突っ込む Groongaが（勝手に）インデックスを作る という手順に分解できる。ここのところ僕が説明したのだけど、「テキストをGroongaに突っ込む」のところ、「どのような形で」というのが抜けていて、そこがぴんとこなかったようだ。あとで@kto
![[Groonga][全文検索]取り敢えずPDFを全文検索するシステムのための最少ステップ | アペフチ](https://cdn-ak-scissors.b.st-hatena.com/image/square/640a03f5121bf4016a87946345e753bf9f90f7b4/height=288;version=1;width=512/https%3A%2F%2Fdiary.kitaitimakoto.net%2Fimages%2Ficon.png)
国産の全文検索エンジンGroonga vs 世界的流行のElasticsearch - CreateField Blog
2014年4月21日は、第4回Elasticsearch勉強会ですね！ http://elasticsearch.doorkeeper.jp/events/8865 第4回Elasticsearch勉強会は、参加希望者が約200名の大反響なようです。 私は勉強会に参加できないので、C言語で書かれた国産の高速な全文検索エンジンGroongaと、Javaで書かれた世界的に勢いのあるElasticsearchについて性能の比較をしたいと思います。 注意事項 今回の検証では1台あたりの馬力を比較するためにサーバ1台での全文検索性能について比較しています。 私は、Groonga(Mroonga)の利用暦が約2年であるのに対し、Elasticsearchの利用暦は2日です。このため、Elasticsearchに対するチューニングの不備や公平な比較になっていない点が含まれている可能性があります。 Ela
AWSアカウントを取得したら速攻でやっておくべき初期設定まとめ - Qiita
AWSアカウントを作成したら最初にやっておきたいことをまとめてみた。 あわせて読みたい 本記事の内容を含めた最新の手順は、下記の書籍にまとまっている。 クラウド破産を回避するAWS実践ガイド AWSアカウント（ルートアカウント）の保護 AWSアカウントが乗っ取られると詰むので、真っ先にセキュリティを強化する。 AWSアカウントへ二段階認証を導入 AWSアカウントでのログインは、AWSアカウント作成時のメールアドレス・パスワードだけでできてしまう。心許ないにもほどがあるので、まずは二段階認証を設定しよう。 IAMのページを開く https://console.aws.amazon.com/iam/home 「ルートアカウントのMFAを有効化」を選択して、「MFAの管理」ボタンをクリック 「仮想MFAデバイス」にチェックが入っていることを確認し、「次のステップ」ボタンをクリック 注意書きを読ん
GitHub に AWS キーペアを上げると抜かれるってほんと？？？試してみよー！ - Qiita
🤔 前書き 稀によくある 、AWS を不正利用されちゃう話、 AWSで不正利用され80000ドルの請求が来た話 - Qiita 初心者がAWSでミスって不正利用されて$6,000請求、泣きそうになったお話。 - Qiita AWSが不正利用され300万円の請求が届いてから免除までの一部始終 - Qiita ブコメ等で GitHub にはアクセスキーを検索するBOTが常に動いていて、公開するとすぐに抜かれて不正利用される 的なコメントがつくのを何度か目にしたのですが、 本当にそんな BOT が動いているの？ どのくらいの時間でキーを抜かれて、不正利用が始まるの？ というのが気になったので、検証してみました。 GitHub にそれっぽいパブリックリポジトリを作成、権限が一つもついてない AWS のアクセスキー＆シークレットアクセスキーをうっかり公開、外部から利用されるまでの時間を計測します。
[CentOS7]Oracle Java8をインストール | Zero Configuration
CentOS7 64bit版にOracle JDK8をインストールします。 CentOSにはopenjdkがYUMリポジトリで標準提供されておりますが、ここではAlternativesコマンドを使い、openJDKと同居する形でインストールを行います。 また、alternativesコマンドは使用せず、環境変数JAVA_HOMEを設定する形での設定方法も記述します。 Oracle JDKのダウンロードとインストール OrecleJDKのダウンロードサイトよりProductが “Linux x64″のファイル 「jdk-8u40-linux-x64.rpm」をダウンロードします ダウンロードしたjdk-8u40-linux-x64.rpmをインストールします $ sudo yum localinstall jdk-8u40-linux-x64.rpm ※rpmコマンドでインストールすると、y
![[CentOS7]Oracle Java8をインストール | Zero Configuration](https://cdn-ak-scissors.b.st-hatena.com/image/square/0feda08dcc6eed8eeb267c62fb358eec0390c205/height=288;version=1;width=512/http%3A%2F%2Fzero-config.com%2Fwp-content%2Fuploads%2Fcentos7-java8.png)
Apache Tikaでコンテンツを読み込んでみる - Qiita
Apache Tikaとは Apache Tika Apache TikaはJavaで開発されたドキュメント分析およびメタデータ抽出ツールキット。さまざまなドキュメント形式に対応しており、対象データからメタデータの抽出を実施する。Tikaは以前はApache Luceneのサブプロジェクトだったが、現在ではApacheソフトウェアファウンデーション直下のプロジェクトとして扱われている。 PDFやOffice文書からメタデータを抽出する「Apache Tika 1.0」登場 とりあえず使ってみる 今回は試しに動かしてみたいだけなので Apache Tika - Download より、tika-app-1.4.jarをダウンロード。 動作にはJava 5以上あればよいらしい。 Getting Started with Apache Tikaを参考に動かしてみるよ。 例えばQiitaのトップか
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
[Groonga][Mroonga][全文検索][類似文書検索]Groongaの類似文書検索 | アペフチ
夢見た「タワマン」は保活激戦区だった 過熱する都会の保活、人生設計を狂わされる人たち - Yahoo!ニュース
chupatext - ChupaText
MariaDBとMroongaで作る全言語対応超高速全文検索システム