これは自然言語処理100本ノック2020に挑んだ、とある人間の記録。 他の問題はこちら → 自然言語処理100本ノック2020から逃げるな まとめ 39. Zipfの法則 単語の出現頻度順位を横軸，その出現頻度を縦軸として，両対数グラフをプロットせよ．j Pythonコード i…

これは自然言語処理100本ノック2020に挑んだ、とある人間の記録。 他の問題はこちら → 自然言語処理100本ノック2020から逃げるな まとめ 38. ヒストグラム 単語の出現頻度のヒストグラム（横軸に出現頻度，縦軸に出現頻度をとる単語の種類数を棒グラフで表し…

これは自然言語処理100本ノック2020に挑んだ、とある人間の記録。 他の問題はこちら → 自然言語処理100本ノック2020から逃げるな まとめ 37. 「猫」と共起頻度の高い上位10語 「猫」とよく共起する（共起頻度が高い）10語とその出現頻度をグラフ（例えば棒グ…

これは自然言語処理100本ノック2020に挑んだ、とある人間の記録。 他の問題はこちら → 自然言語処理100本ノック2020から逃げるな まとめ 36. 頻度上位10語 出現頻度が高い10語とその出現頻度をグラフ（例えば棒グラフなど）で表示せよ． Pythonコード import…

これは自然言語処理100本ノック2020に挑んだ、とある人間の記録。 他の問題はこちら → 自然言語処理100本ノック2020から逃げるな まとめ 35. 単語の出現頻度 文章中に出現する単語とその出現頻度を求め，出現頻度の高い順に並べよ． Pythonコード import NLP…

これは自然言語処理100本ノック2020に挑んだ、とある人間の記録。 他の問題はこちら → 自然言語処理100本ノック2020から逃げるな まとめ 34. 名詞の連接 名詞の連接（連続して出現する名詞）を最長一致で抽出せよ． Pythonコード import NLP100_30 sentence_…

これは自然言語処理100本ノック2020に挑んだ、とある人間の記録。 他の問題はこちら → 自然言語処理100本ノック2020から逃げるな まとめ 33. 「AのB」 2つの名詞が「の」で連結されている名詞句を抽出せよ． Pythonコード import re import NLP100_30 senten…

これは自然言語処理100本ノック2020に挑んだ、とある人間の記録。 他の問題はこちら → 自然言語処理100本ノック2020から逃げるな まとめ 32. 動詞の原形 動詞の原形をすべて抽出せよ Pythonコード import NLP100_30 sentence_list = NLP100_30.get_morpheme(…

これは自然言語処理100本ノック2020に挑んだ、とある人間の記録。 他の問題はこちら → 自然言語処理100本ノック2020から逃げるな まとめ 31. 動詞 動詞の表層形をすべて抽出せよ． Pythonコード import NLP100_30 sentence_list = NLP100_30.get_morpheme() …

これは自然言語処理100本ノック2020に挑んだ、とある人間の記録。 他の問題はこちら → 自然言語処理100本ノック2020から逃げるな まとめ 30. 形態素解析結果の読み込み 形態素解析結果（neko.txt.mecab）を読み込むプログラムを実装せよ．ただし，各形態素は…