AIエンジニアを目指す文系未経験者@転職中

日々の出来事や勉強、転職など日記のような形で書いたブログです

久々に

転職活動に本腰を入れてブログを書けなくなっていました。 現在はエージェントを使いつつKaggleに参加して勉強を進めているのですが、なかなか思うようにはいきませんね。 書類が通っても面接で落とされます。 以前にも書いたような気がするのですが、自分が…

基礎固め

先人たちの教えから、コンペは残り1ヶ月を目安に活発になっていくそうで、初心者の私はいまモデル作成やらをしても空回りするだけで、よく分からないうちにコンペが終わって何となくkaggleをやった事がある人になってしまう可能性が非常に高いため、まずは基…

積読の多いこと……

とりあえず日課として、ディスカッションとノートブックは毎日覗くことは絶対することを決めました。 Beginnerコンペで結構無茶苦茶やってたので、せっかく購入した書籍達が置物になってしまってます:;(∩´﹏`∩);: 今後の予定としては とりあえず1日1サブ 書…

Pytorch 完全に理解した

こういうプログラマーのギャグをいつか使ってみたいと思っていてちょうどいい話題ができたので使ってみました(๑ ᴖ ᴑ ᴖ ๑) エンジニア用語(笑)には以下のようなものがあるそうです。 【エンジニア用語解説】 「完全に理解した」 製品を利用をするためのチュー…

スタートを切る

私は転職活動という大きな課題を抱えていますが、昨今のコロナ事情やわたしの経歴等でなかなか思うように進まず歯がゆい生活を送っている日々です( ・ ̫・ ) 私のような業界未経験者でしかも文系大学出身だとどうしてもIT系の企業は雇ってくれないですね……ま…

MoAコンペの反省会に参加させていただきました!

MoAコンペ反省会 先日 fkubotaさんとcool_rabbitさんが主催した。MoAコンペの反省会に参加させて頂きました。 反省会直前にヘッドセットのマイクが壊れてしまい、傍聴人として参加していました。 私同様にコンペ初心者の方や悩んでいる方、単純に興味がある…

あっけなく達成された目標……

先週から参加していたSIGNATEのBeginner向けコンペでやっと目標スコアを達成して、intermediateへと無事昇格できました! 今回は力を入れて臨んだのですが、住宅価格予測はkaggleのタイタニックコンペに並ぶ入門のようなコンペだったため、多くのよい解法や…

伸び悩む( ˘•ω•˘ ).。oஇ

特徴量を追加すればどれくらい上がるのか? 私はそんなことを考えながらコンペに参加したことがなくて、スコアが伸びない原因は特徴量にあるとずっと思ってて、モデルやハイパーパラメータチューニング、アンサンブル学習はほんのわずかしか上がらないため、…

簡易モデルを作ったはずなのに

今日は簡易モデルを完成させて、EDAを頑張るつもりだったのですが、簡易モデルが非常に高いスコアを出してしまいまして、おそらく特徴量を少し増やすか、パラメータの調整を行うだけで目標に到達しそうで焦っています。 なぜ焦っているのかと言うと、なにも…

いつも通りのエラー

今日は通るモデル作成 とりあえず動くモデルを作った訳なのですが、int型を入れてるのにobject型が入っているというエラーが重なり、今日は進歩がありませんでした。 今回80個以上データがあるためEDAの時間がめちゃくちゃかかることが容易にそうできるので…

コンペ始まり!

今日からBeginnerコンペが始まりました。 住宅の価格予想がテーマでRMSEが評価指標なので、回帰モデルを使えばいいところまでは抑えました٩( ‘ω’ )و とりあえず流れとして とりあえず通るモデルを作る バリデーションモデル作成 EDAをする 特徴量エンジニア…

結局何が足りてない???

色々なブログ記事やkaggleのディスカッションなどを読んでいたのですが、検索の仕方や知識不足のせいで、あまり成果が出ませんでした(´・ω・`) 機械学習でなぜスコアが伸びないのかを考えた結果 EDAがまず足りない 考察するフェーズが完全に欠けている 正し…

エラーと修正の日々

昨日のエラーの究明作業だったり、違うモデル作りをしていたのですが、まだLGBMに振り回されていたり、惰性でとりあえずコードを書いたりしているんですが、そろそろしっかり勉強しないといけないとは思いながらも中々上手くいかないものです(´・ω・`) とり…

久しぶりの更新

体調不良やらなんやらが重なり、勉強できなくて、更新出来ませんでした(。ー_ー。) 今日から勉強をまたはじめました! とりあえずSIGNATEのビギナーコンペがまだやってたので、リハビリにやったんですが、前使ってたモデルを使ってトライしたところ、知らないエ…

E資格 数学編 エントロピー??(ºωº)??

最近体調を崩していてまともに勉強できなくて、今日もそこまで勉強時間を確保できませんでした……(/・ω・\) やっと数学編最後の話題 情報理論について触れます。 そもそも情報理論とは 情報理論(じょうほうりろん、英: Information theory)は、情報・通信を…

E資格 数学編 分類のアルゴリズム!?

正直なんで確率がこんなところで出てくるのかわからなかったのですが、迷惑メールの仕分けなどにナイーブベイズと呼ばれるものが使われていて、そのナイーブベイズというものが確率を用いられているそうです。 ナイーブベイズとはという話をするために、ベイ…

E資格 数学編 固有値分解?

学生の頃 数学が苦手で逃げて来たんです、でもエンジニアになるには、避けては通れない道だったのでやっているんですけど、めちゃくちゃ面白いことに気づきました! 新しいことを学ぶ楽しさと、なんとなく抽象的なイメージを持っていた事象を理解できること…

E資格 数学編 微分積分

E資格はシラバスの範囲で出題されるそうでそれをみると、数学だと線形代数、確率・統計、情報理論が出題範囲だそうです。 線形代数の復習をするさらに前段階の微分積分をやっておかないと後々後悔してしまうと思ったので、スクールのカリキュラム通りに復習…

E資格に向けて

本当は先週辺りからE資格で一番使われている goodfellow著の深層学習という本を読み込んでいこうと思っていたのですが、私の手違いで書籍版を購入できなくて、先週も今日もKaggleのノートブックを眺めていました。 書籍版にこだわる理由として、電子書籍より…

独学の限界 人に頼るということ

今日は体調がよくなくて、Kaggleの色々なコンペのリーダーボードなどを見て1日が終わりました。 Kaggleをみると様々な方法で、EDAをしたり、モデリングをしたりそれを調べるだけでも有益な情報ばかりだったのですが、この技術を違う問題になったとき、どう活…

Kaggleは情報の宝石箱

タイタニックコンペで少し触ってたのですが、今日からKaggleのコンペだったりをやりながら勉強しようと思います! 正直英語ができないのをこれほど人生で悔やんだことはないのではないかと思うくらい、活発に日々議論していて、こういう議論に参加できるよう…

つぎの目標

とりあえず、コンペが終わったので、つぎの目標を決めないといけないなと思いました。 わたしには、まだSignateがはやいというか、SignateってあまりKaggleとかよりフォーラムが活発でなくて、ほとんど1人でコンペに挑戦している感覚で、まだ私が扱うには難…

Signate コンペ 最終日 やっと終わった

約2週間 振り回されたこのコンペに終止符が打たれます。 結果から言うと、私は指定されたスコアに達することが出来ませんでした(;_;) submit回数は計14回して2週間のほとんどがエラーとの戦いでした。 今回は、自分がなにを学んだのか、なんでこんなに力…

Signate コンペ 16日目 わかんない……

ようやく LGBMが回って一安心してsubmitしようとしたら、確率で出たんですよね。 スタートブックを見たらastype(int)にして0.5より大きいか小さいかで0,1分類してたんですよ。そうするんだと思ってやったら少しだけスコアが上がったんです。 でも色々変えた…

Signate コンペ 15日目 調整ミス???

昨日LGBMに苦戦し今日やっと学習をスタートさせることが出来ました👏👏👏 しかし!! 3時間回しても一向に終わらない(;_;) いまもずっと回してます……果たして終わるのでしょうか?

Signate コンペ13,14日目 LGBMの脅威

えぇ10日目が2つあってびっくりしました…… 昨日やっと特徴量もなんとか追加して早速機械学習させてsubmitしようと思ったのですが、、、、 Light GBMが私の行く手を阻むのでした。 One hotエンコーディングだと容量も時間もとてもかかるし、悩んでいました。…

Signate コンペ 12日目 なんだこれ……

今日からしっかり特徴量に目を向けグラフで可視化したり仮説を立てたりしました。 とりあえずはできました。 データ加工の難しさや、立てた仮説をコードに落とし込む作業の大変さを身に染みて感じ力不足を嘆きました( ´. .̫ . `) 明日はlightgbmを使い学習さ…

Signate コンペ 11日目 モデルは作った

いい学習器をみつけて、いざsubmit! 結果、前よりもスコアが悪い( ´゚д゚`) スタートブックをやっとまともに見る時間が出来読んでみると、自分が今やっていることが誰でも通る道だという安心感と、自分が何をするべきかというのを学べました! 明日からは特…

Signate コンペ 10日目 まさか……\( ö )/

えー昨日 3時間30分回して1番最適なアルゴリズムを見つけました!(((o(*゚▽゚*)o))) さあ今日はモデル作ってsubmitまで行くぞという気持ちでPCを起動させ、ちょくちょく修正して、とりあえず一通り完成たなと思ってsubmitしました! するとERROR Σ(・ω・ノ)ノ! CSV…

Signate コンペ10日目 PC……

ええ今日は特にこれといって進歩がなく、スクールで習ったアルゴリズムをパイプライン化して回すことにしたんですけど、アホみたいに時間かかって、今も回し中ですwwww 残り1週間ですが、まあゆっくり頑張ります 多分探索が足りなかったから、スコアが伸びな…