最近は情報収集のためにツイッターをちゃんと使い始め、データサイエンスやビッグデータ界隈の人をフォローして、タイムラインを追っていました。 そうしたら、ML Study Jamsというイベントの情報が流れてきます。 こちら…

word2vecは単語を分散表現化する技術です。 単語を分散表現にしてどんなことができるか、みたいなところを実際に触ってみて体感しようということで、今回いろいろと遊んでみました。 まずはword2vec学習済みモデルを入…

前回、文章要約のために羅生門を形態素解析しました。 【python/sumy】様々な文章要約アルゴリズムで羅生門を要約してみる。 せっかく分かち書きしたので、ついでにwordcloudの可視化もやってみようと思います。 …

自然言語処理の領域の一部に、文章要約の世界があります。 そこではLexRankだとかTextRankだとか、LSAだとかいろいろな文章を短くする(というよりかは重要な文章を特定する)アルゴリズムが開発されていて、pyth…

バスケット分析はどの商品とどの商品が一緒に買われたか？の連関規則を発見する分析手法です。 分析にあたって、アイテム×アイテムの共起性を計算する必要がありますが、それをやるためには下右図のようなデータの持ち方をする必要があ…

アイテムベースの協調フィルタリングで簡単なリコメンドエンジンを作成してみました。 内容はほぼこちらのカーネルに拠っています。 https://www.kaggle.com/ajmichelutti/collaborati…

分類問題ばかりやっていたので、回帰問題にも取り組んでみました。 KaggleのHousePricesコンペのいくつかのカーネルを読んだりして、勉強になったことの覚え書きです。 お膳立ては以下の通り ・まずはベースラインと…

マーケティングにおいてデータマイニングがどのように活用されているか興味があったので、データドリブンマーケティングという本を読みました。 マーケティングに関して幅広く取り扱っている内容ですが、今回の目的に合致するのは9章で…

佐藤航陽さんの『未来に先回りする思考法』を読みました。 後から振り返るようにメモしておきます。   未来に先回りする思考法　読書メモ   無駄な努力はないが、報われない努力はある 現状をひたすら効率化…

数字ではなく、アルファベットをオートフィルしたいシーンって、エクセルやスプレッドシートを触っているとちょこちょこありますよね。 例えば、Sheet1にこんなデータがあったとして、、 この見出しを縦軸にしてsheet2にこ…