【Pythonプログラミング】Zip関数を使いこなす
こんばんは。今日は、PythonのZip関数の使い方について整理しておこうと思います。 Zip関数の機能 zip関数は、複数のイテラブルオブジェクト（リスト、タプルなど）を１つの要素にまとめる場合に使われます。 例えば、...
PythonPython
Python
機械学習【機械学習】Scikit-Learnで交差検証(Cross-Validation)を一瞬で実装する【Python】
こんにちは。本日は、Scikit-Learnを使って機械学習モデル構築時の交差検証を実装する方法をご紹介いたしますす。（交差検証の理論は分かっている前提で話を進めます） 方法１：sklearnのcross_val_sco...
データ分析【Pythonデータ分析】カテゴリ毎の存在比率を計算する
こんばんは。本日は、データ分析Tipsということで、最近知った（遅ればせながら・・）便利コマンドをご紹介したいと思います。 value_counts()のnormalizeオプションを利用する 下のデータは公開されている...
データ分析【Python×自然言語処理】テキストデータを極性辞書で感情分析してみる
こんにちは。 今日はツイートデータを用いてテキストのネガティブ/ポジティブ分析に挑戦してみたいと思います！ はじめに：分析対象のテキストデータ（Twitterデータ）を取得する 今回、分析対象のテキストデータにはTwit...
Python【Pythonプログラミング】データのハッシュ化と実行速度検証
こんにちは。今回はPythonでデータをハッシュ化する方法についてまとめておこうと思います。 実際の業務でデータ分析を行う際には、個人情報などはマスクをかけて持ち出すケースもあるかと思います。そのような場合には、データを...
データ分析【Python×自然言語処理】形態素解析で分かち書きした単語を原形変換する
こんにちは。最近自然言語処理を勉強していますが、今回は、形態素解析を行って分割した各単語を原型に戻す方法について整理しておきたいと思います。どうやら形態素解析を行った後に、単語の種類数を減らすために単語を原型に変換すると...
MongoDB【Python×データ分析】TwitterデータをMongoDBに保存できるようにする
こんにちは。最近は、SNSデータをもっと自由に分析できるようになりたいなぁということで関連した記事をよく書いていますが、今回もそのシリーズになります！ 前回書いたTwitterデータの分析記事でご紹介した方法の発展形とし...
Python【Pythonプログラミング】While Trueで無限ループ
プログラミングの備忘メモ。短い記事ですが、最近Pythonのプログラミングをしている中で、While True構文の使い方を知ったので備忘としてまとめておきます。 While Trueの構文 Pythonである特定の条件...
データ分析【自然言語処理】PythonとTwitter APIでデータ分析
こんばんは。今日はTwitter APIを使ったスクレイピングに挑戦したいと思います。Twitterのデータを自由に取得できるようになったら今後色々なデータ分析で幅が広がりそうです。 この記事では、Twitterのデータ...
データ分析JupyterLab2.0になって変わったこと
こんばんは。いつもデータ分析で愛用しているJupyterLabのメジャーバージョンが先月上がっていたことに今更ながら気づきましたので、私のJupyterLabもアップグレードしてみようと思います。 また、タイトルとは関係...
PythonPython実行状況をプログレスバーで可視化するライブラリtqdm
ちょっと便利なPythonライブラリを見つけたのでご紹介。今日の記事はさっくりです笑 tqdm こちらは、Pythonの処理実行の進捗状況をプログレスバーで表してくれます。 Github：https://github.c...
Python【Pythonプログラミング】Lambda関数の使い方
こんにちは。今日はPythonのLambda関数について調べてみようと思います。私はデータ分析や機械学習・統計モデリングをするようになってPythonを学びはじめたのですが、Kaggleなどのコンペで他の人のコードを見て...
Azure Machine Learning【2022年最新版】10分でできる！Azure Machine Learningを使ったPython/Rデータ分析環境構築【Microsoft Azure】
こんばんは。この記事では、Microsoft Azureでデータ分析環境を利用できるようになるまでのステップを解説します。 自分がセットアップした時の手順を備忘として書きました。それでは早速まいります！ 2022年2月、...
データ分析10分でできる！Anacondaで機械学習・データ分析環境構築
こんにちは。本日はローカル環境に機械学習環境を構築する手順を整理します。10分でやってしまいましょう！ということなのでもうサクサクと手順を説明していきます！ また、これから説明する手順はMac/Windowsともに共通フ...
Profile
初めまして。
東京で働くデータ分析屋兼アプリケーションエンジニアです。旅行とカメラと江戸時代が趣味です。日々勉強したこと、趣味のことについて、自分の記録も兼ねて。
もともとは旅行記残そうと思って始めたブログですが、いつのまにか技術の話ばっかりに・・
＊記事はすべて個人の見解で、かつ記載時点の情報に基づいています。
