機械学習一覧

huggingfaceのtransformersで5分で試せる!日本語bertのインストールから動作確認までcolaboratoryにて確認できる!

huggingfaceのtransformersを使うことにより、日本語のbertを比較的簡単に使うことが出来るようになりました! 今回は、colaboratoryにて、mecabなどの形態素ライブラリー、transformersのインストール方法例も記載しているので、colaboratoryにてすぐ使うことができます。

【pythonで自然言語処理】日本語版・word2vecで分散表現した単語を2次元に可視化する

前回、英語版のword2vecで分散表現した単語を2次元に可視化する方法を書きました。 今回は、その日本語版でpythonを使ってjanomeによる日本語の形態素分析、word2vecによる分散表現、PCA(主成分分析)による次元圧縮(N次元から2次元へ)を施し、単語を2次元の図にプロットする方法を解説します。

スポンサーリンク
PR




PR