【自然言語AI】日本語bert先生にMASKを使った質問で恋愛相談してみた！
bertは、Googleの検索で使われるなど、自然言語処理の分野ではよく使われています。今回、 bertのMASKを利用して、気になった女性が現れたという想定で恋愛相談をしてみました。
「機械学習」一覧
kaggleのコンペでランキング爆上がりのデータ水増し(data augmentation)方法はPCAだった
kaggleのコンペでランキング爆上がりのデータ水増し(Data Augmentation)方法とは？ 実際のコンペで水増しを使ったらスコアが上がり、メダル圏外から銅メダル圏内に入ることができました。
【AI】日本語Bertでファインチューニングしてツイートの感情の分類を解く！
huggingfaceのおかげで、比較的少ないコード量で日本語のBertが使えるようになりました。今回は、Bertを使ってツイートの感情分類をする例をGoogle Colaboratoryも使って公開したいと思います。
huggingfaceのtransformersで5分で試せる！日本語bertのインストールから動作確認までcolaboratoryにて確認できる！
huggingfaceのtransformersを使うことにより、日本語のbertを比較的簡単に使うことが出来るようになりました！ 今回は、colaboratoryにて、mecabなどの形態素ライブラリー、transformersのインストール方法例も記載しているので、colaboratoryにてすぐ使うことができます。
問題を理解したらkaggleのコンペでソロ銀メダルをゲットした話
kaggleのコンペで7ヶ月目でやっとソロで銀メダルをゲットした話。決め手は問題の意図、背景を理解することだった。そしてもうひとつ重要なことは、うまくいかなかったときの行動パターンを残しておくこと。
seleniumとpythonを使ったスクレイピングをyahoo知恵袋を例に解説！図に出力も
pythonのseleniumを使って、Yahoo知恵袋の質問の検索結果の取得および、質問の詳細ページの取得を例にスクレイピングの実装例を紹介します。さらに、スクレピングしたデータを図に出力する方法も紹介します。
【pythonで自然言語処理】日本語版・word2vecで分散表現した単語を２次元に可視化する
前回、英語版のword2vecで分散表現した単語を２次元に可視化する方法を書きました。 今回は、その日本語版でpythonを使ってjanomeによる日本語の形態素分析、word2vecによる分散表現、PCA(主成分分析)による次元圧縮(N次元から２次元へ)を施し、単語を２次元の図にプロットする方法を解説します。
5分で解決！nltk.downloadを実行したらSSL CERTIFICATE_VERIFY_FAILEDでハマった話
自然言語処理のパッケージnltkのnltk.downloadを実行してstopwordsをダウンロードしようとしたら、 SSL CERTIFICATE_VERIFY_FAILEDエラーがでてハマりました。解決策がわかったので記事化します！
kaggleで戦うならMongoDBは必須！csvファイルを5分以内でimport(インポート)できる
kaggleで戦うならmongoDBは必須。その理由は、データの比較などが簡単にできるからです。この記事では、csvファイルをmongoDBにインポートして、解析する方法を解説します。
colabですぐ試せる！サクッとseq2seqで英語から日本語翻訳を試す
seq2seqを使って英語から日本語に翻訳するpythonのプログラミングのサンプルを公開します。ライブラリーは、kerasを使用しています。
スポンサーリンク