さまざまな手段で情報発信できるようになり、情報社会と呼ばれている現代、プラットフォームや媒体によって文字数制限があることも多々ある。 そのため、紙面などに掲載した記事を他メディアにも配信している新聞社などは、その都度制限文字数に応じて人手で記事を要約している。 その工程を全て代替してくれるかもしれないAIが登場した。富士通株式会社は、AI技術「FUJITSU Human Centric AI Zinrai」を活用し、記事の自動要約や顔写真の背景を着色できる無償のトライアルサイトを、企業向けに7月8日より公開した。 高精度で瞬時に記事の要約を可能にトライアルサイトでは、自動記事要約システムと顔写真の背景を自動着色するシステムを利用できる。 自動記事要約システムは、さらに重要文抽出機能と生成型要約機能に分かれる。 自動記事要約システム 重要文抽出機能 記事全文から重要度の高い文章をAIが判定し
わかりやすく端的に伝えることって、割と難しいですよね。 これってAI技術を使えませんか。 つまり、長文から意味を抜き出す要約を機械的な処理で実現できるのではないでしょうか? このような要望にお応えします。 近年、AIは様々な分野で成果を出しています。 そのなかには、文書の要約も自然言語処理技術を用いて実現されています。 今回は、自然言語処理技術を用いた文書要約ツールを作成してみます。文書要約の手法は、様々な手法が提案されていますが、今回はLexRankを使用します。 LexRank: Graph-based Lexical Centrality as Salience in Text Summarization https://arxiv.org/pdf/1109.2128.pdf 文書要約手法について整理します。 文書要約について 文書要約手法は抽出型と生成型に分けられます。 抽出型要約
3つの要点 ✔️ 文章要約タスクに特化した事前学習モデルであるPEGASUSが登場 ✔️Gap Sentence Generation(GSG)を導入 ✔️12の文章要約タスクで高性能、少ない学習データで既存モデルを超える PEGASUS: Pre-training with Extracted Gap-sentences for Abstractive Summarization written by Jingqing Zhang, Yao Zhao, Mohammad Saleh, Peter J. Liu (Submitted on 18 Dec 2019) subjects : Computation and Language (cs.CL) はじめに Transformerを用いた事前学習モデルには、BERT、XLNet、RoBERTa、ALBERTなどがあります。これらのモデル
Tracking Progress in Natural Language Processing Table of contents English Automatic speech recognition CCG Common sense Constituency parsing Coreference resolution Data-to-Text Generation Dependency parsing Dialogue Domain adaptation Entity linking Grammatical error correction Information extraction Intent Detection and Slot Filling Language modeling Lexical normalization Machine translation Miss
こんにちは、mergyです。3月まで大学院生で今は港区のIT企業に勤務しています。 blog投稿は初めてになります。よろしくお願いします。 今回はテキスト自動要約の手法について書かせていただきます。 intronworksの判決文検索サービスleaglesプロジェクトで用いられている技術です。 とりあえず、今回はソースコードなどは出てきませんので、非エンジニアの方も是非読んでいただければと思います。 テキスト自動要約とは まず、例を見てみましょう これはlivedoorニュースですが、皆さんも上記の画像のようなニュースサイトを見たことがあるのではないでしょうか?テキスト自動要約はこのように、「長い文章も読まなくても良いように、最低限の必要な情報だけを自動で抽出する」技術です。(livedoorニュースが手動か自動かはわかりませんが) テキスト自動要約手法 実際にどのようにテキスト要約を自動
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く