PolyglotとGoogle Cloud Functionで形態素解析apiを作る
PolyglotとGoogle Cloud Functionで形態素解析apiを作るThursday, March 21, 2019 現在大学の授業で行なっているプロジェクトで英語の文章を形態素に分割することがあったため、pythonのpolyglot を使用し、ついでにgoogle cloud functionでベータ版として提供されているpythonランタイム で形態素解析apiを作成しました。 PolyglotとはPolyglotは英語で多言語話者のことを指すのですが、pythonのpolyglot はその名の通り多数の自然言語を処理するツールを提供するパッケージです。 GoogleのCloud Natural Language Api の構文解析のように文章を品詞分解してくれるパッケージはよくあるのですが、polyglotのように英語の文章を形態素に分解する機能があるものは珍しいの
polyglotで英語の構文解析をする - tohokuaikiのチラシの裏
日本語だと、MeCabとか入れておけば大体大丈夫で日本語での検索も捗るんだけど、英語って言われると…となってしまったので lab.astamuse.co.jp を参考にCentOS7で解析してみる。 インストール とりあえず環境 $ more /etc/redhat-release CentOS Linux release 7.4.1708 (Core) 実行 python-numpyが必要らしい。・・・んだけど、yum listしてみると、python27-numpyしかない。 しかし、んー、27ってついてるけど・・・・ [itoh@localhost ~]$ which python2.7 /bin/python2.7 [itoh@localhost ~]$ which python /bin/python [itoh@localhost ~]$ ls -l /bin/python l
Polyglotを使った形態素解析の環境構築
英文の自然言語処理におススメ！お手軽なPolyglotを使ってみた。(http://lab.astamuse.co.jp/entry/try-polyglot) ↑を参考にさせていただきながら、Polyglotを使えるようになるまでの話。別の環境で動かす必要が出てきた時にハマらないようにメモ(環境はAWS Cloud9のAmazon Linux) pipでPolyglotをインストール $ sudo pip install polyglot 英語用のモデルをダウンロードしようとするとICUが無いと言われる $ polyglot download embeddings2.en pos2.en 〜略〜 ModuleNotFoundError: No module named ‘icu’ pyicuを入れようとすると何か色々言われる $ sudo pip install pyicu 〜略〜 Pl
英文の自然言語処理におススメ！お手軽なPolyglotを使ってみた。 - astamuse Lab
こんにちは。白木（@YojiShiraki）です。デザイナーです。 今日はPythonで英文形態素解析をする上でお手軽便利なpolyglotについて紹介します。 背景 当社ではデータを分析・解析する機会がままありまして、こうしたときに自然言語解析の処理のツールを利用しています。特に最近では英語データが多く、このあたりのツールのニーズが高くなっています。 しかし、いざ英語の解析となると意外に情報がありません。 例えば、日本語の解析ならMeCabやChaSen、Kuromojiといったものはすぐ見つかります。しかし英文の自然言語解析ではTreeTaggerの情報は目につくもののイマイチまとまった情報がありません（このページやこのページに他の選択肢がまとまっていますが）。 おそらくこの領域ではNLTKが王道なのかと思いますが、やや重厚感あります。 そこでもう少しライトなものをということでPoly
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
