エントリーの編集
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
作成中のウェブコーパスの内容について - やた@はてな日記
記事へのコメント0件
- 注目コメント
- 新着コメント
このエントリーにコメントしてみましょう。
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
作成中のウェブコーパスの内容について - やた@はてな日記
続けてコメントをいただいたので,ウェブコーパスの中身について分かっていることを書いておきます. ア... 続けてコメントをいただいたので,ウェブコーパスの中身について分かっていることを書いておきます. アダルト系のページについて Yahoo! ウェブ検索 Web API を使うとき,デフォルトの設定(adult_ok は値なし)にしているので,アダルト系のページはかなり少ないと思います.一部を手作業で確認したとき,それらしいページは見当たりませんでした. URL の正規化について URL の正規化についても,Yahoo! Web API におまかせで,ほぼ問題ないと思っています.ただし,http://example.com/ と http://example.com/index.html のような重複は,少ないながらも確認しました.大抵は同じ内容になりますが,サーバの設定次第では異なる内容になる可能性もありますから,仕方がないと思います. 同一内容のページについて 手元にあるデータの一部(約