モデルを構築して予測して、はい終わり。ではなく、きちんとどの要素がどれくらい結果に寄与しているのかを説明できた方がよいかと思います。 そんな時に、モデルに利用した特徴量の重要度を算出する方法を知っておくと便利です。 とい…

機械学習を自分のスキルです、と言えるようになるにはどのくらいまで深く勉強すればよいのか最近わからなくなっています。 どれくらい深くというのは、↓の分類でいうレベル3まで行く必要があるのか、というところです。  …

統計学ってビジネスでどう使われているんだろう、という疑問の解消のために、新書でサクッと読めそうな『金鉱を掘り当てる統計学』という本を手に取りました。 かんたんにメモしていこうと思います。   概要  …

大学を卒業し、意気揚々と新しい環境に向かう新社会人を待ち受けているのはながいながい研修です。 入社当初から目を付けられたくないですから、居眠りなんて言語道断。ですが、眠くなってしまう研修もありますよね。 新社会人の自分も…

回帰問題を解く際に、カラム数が膨大なデータセットからモデルを作成したい場合、すべての特徴量を使うのはあまりよろしくないように思います。メモリ的にも、結果の解釈のしやすさ的にも。 そこで、特徴選択を行うわけですが、さまざま…

細谷岳広の『結局のところデザイン思考ってなんですか？』という本を読みました。 きっかけはこれからデザイン思考を学ぼうと思っていて、kindleunlimitedで無料で読めて、分量も少なく入門に手頃に感じたためです。 結…

ウェブページ全体のキャプチャをとりたいのだけれど、ページの中にページが埋め込まれているようなウェブサイトだと、うまくいかないことがあります。 例えば、以下のcidexaさんのpandas学習ページなんかは、ふつうに印刷＞…

データの前処理に際して、外れ値の処理があります。 Kaggleのカーネルを読んでいて、勉強になった外れ値処理の方法がありましたので、ここにメモしておこうと思います。 ▼こちらのカーネルを参照 https://www.ka…

自然言語処理についても手を伸ばしてみようと思い、AI academyさんのサイトで勉強を始めました。 無料でみられるコンテンツでちょろっと勉強したので、アウトプットとして、『羅生門』の形態素解析をやってみたいと思います。…

今回はXGBoostのパラメータチューニングをGridSearchでやっていこうと思います。 ▼タイタニック振り返り全体の流れ   ▼前3回の記事 【Kaggle】タイタニック振り返り#1　RandomFore…