Python

【機械学習】勾配降下法についてざっくりまとめ【Python】

今年は学習モデルの作り方について勉強を続けてきました.「じゃあぱっと作り方や計算式も引き出せるよね」って言われると……無理でした.今年から勉強方法も一新して、ノートで少しずつまとめたりなど個人的に楽しいと思えるインプットをやってきましたが、それ故にアウトプットが不十分になってしまいました.ということで紙のノートなどにまとめた資料を総括して、頭の中から引き出せるようにこれから年末までを目標に書いてい […]

[データハンドリング]特徴量、カテゴリ変数の正規化についてざっくりまとめ

 カテゴリ変数の正規化に関しては、分類モデルであればカテゴリに分ける際に必須なのため、それなり(One-hotベクトルぐらいしか知らないが)に分かります.が、主に入力値(特徴量)の正規化はあんまり考えずに生データを突っ込んでいたのでこれを機に調べてみました. 分かりやすく説明できる気がしないので、「完全に理解した」きっかけになったサイトなどのリンクを張りつつ、「要するに」で総括していこうかと思いま […]

【JupyterLab】Pandasでwebページをcsv出力できるのが便利すぎる話

こんにちは. 機械学習の勉強に明け暮れるxinoです.最近データハンドリング辺りに嚙みついていますが、その一環として「scrapy」を使ってwebスクレイピングをやってみました.(チュートリアルをまとめたので気が向いたら共有します) scrapyってなんやねんって方はこちらを10分で理解する Scrapy勉強初期にお世話になりました. これがまあまあ規模が大きく、SpiderやPipelineやら […]

[Python]loggingについて勉強したので汎用モジュールを作成

  • 2021.08.20

今までprintで雑なログしか吐いたことがなく、そろそろこの非効率から脱したいと思い、これを機にインプットしました.そもそもloggingとは何か、については他の良書に譲るとして(都度参考リンクを紹介していきます)、今回汎用的に使えるログ出力機能を作ったのでまとめます. はじめに インプットとして以下のサイトを読みました. 【Python】仕組みを理解してログ出力を使いこなすhttps://hac […]