2021-01-11から1日間の記事一覧

NLPを用いたタスク

" data-en-clipboard="true"> " data-en-clipboard="true"> NLPを用いたタスク ・検索エンジン ・文書分類 ・機械翻訳 ・予測変換 ・文書要約 ・質疑応答 ・対話 ・スパムフィルタ ・音声アシスタント ・構文解析 ・小説の執筆 構文解析 ・文節係り受け解析…

NLPの流れ

単語分割 ・形態素解析 ・Ngram 前処理 ・正規化:同じ意味の単語が別々に集計されないようにする ・HTMLタグ ・ストップワード:頻出キーワード、①やⅰ、です、私など ・数字 ・顔文字 ・化学式:C6H5OHなど ・数学や物理の公式 ・URL ・商品コードや型番 単…

NLP

自然言語 NL:Natural Language :日本語や英語のような 自然発生的に生まれた言語 ・プログラミング言語のような人工言語(Artificial Language)とは対比の存在 自然言語処理 NLP:Natural Language Processing :人間が日常的に使っている 自然言語をコンピ…