「 マイニング 」 一覧
-
クラスタリング(KMeans)のすゝめ
2024/02/15 -Technology
マイニングはじめに こんにちは! 僕は研究を行いながら、長期インターンでデータサイエンティストとして働く大学院生です! 学部時代から長期インターンを始め、現在まで4社経験してきました。 この経験から、プログラ… ...
-
ChatGPT に便利コマンドラインプログラムを書いてもらう: search_files.py
2024/02/15 -Technology
マイニングuser: 指定したディレクトリの中の .py ファイルを再帰的に全部走査し、目的の文言を含むファイルとその該当箇所をリストアップする python プログラムを書いてください。 assistant: ...
-
メモ: VSCodeのPythonコード整形プラグインBlack formatterの設定/quote変換を回避
2024/02/15 -Technology
マイニングVSCodeにBlack formatterプラグインを導入したあとの設定メモ。 基本的にはデフォルト設定で、保存毎に整形していく。 しかしデフォルトではシングルクオートの文字列をダブルクオートに変… ...
-
shap package
2024/02/15 -Technology
マイニングshap shap(SHapley Additive exPlanations)パッケージは、機械学習モデルの予測を解釈し、モデルの特徴の重要性を明らかにするためのツールキットです。shapは、Sh… ...
-
Pythonの並列処理、threading
2024/02/15 -Technology
マイニング1 音を鳴らしながら、次の処理させたい・・・ 前提、背景 パソコンがシリアル通信で他の設備から情報を毎秒している 想定した異常が返ってきた時、警報を鳴らしたいなぁ・・・ でも、シリアル通信を毎秒繰り… ...
-
レーベンシュタイン距離(編集距離)の解説と実装
2024/02/15 -Technology
マイニングレーベンシュタイン距離(編集距離)とは、2つの文字列がどの程度異なっているかを示す数値です。 例えば「ちからうどん」を「からげんき」に編集するには以下の4手順が必要なため、編集距離は4となります。 … ...
-
labelmeの使い方
2024/02/15 -Technology
マイニングアノテーションツールであるlabelmeの使い方をメモしておきます。 実行環境:MacBook Air M1, 2020 https://github.com/wkentaro/labelme la… ...
-
LabelImgの使い方
2024/02/15 -Technology
マイニングアノテーションツールであるLabelImgの使い方をメモしておきます。 実行環境:MacBook Air M1, 2020 https://github.com/HumanSignal/labelI… ...
-
空のDataFrameに対して`pivot_table`を実施すると、`columns`プロパティが空のDataFrameが生成される
2024/02/15 -Technology
マイニング環境 Python 3.12.1 pandas 2.2.0 やりたいこと pandas.pivot_tableで集計したpandas.DataFrameを、CSVファイルに出力したいです。 空のDa… ...
-
ベイズ最適化(実験点提案)アプリをStreamlitで構築するぜ!
2024/02/15 -Technology
マイニングはじめに Streamlitって気づいたら神アプデしてますよね。もっと大々的に宣伝してほしいものです(←自分で情報取りに行け)。 さて、化学メーカーに勤めている"自称"データサイエンティストとしては… ...
-
未経験エンジニアが環境変数と.envなどについて調べたのでメモ
2024/02/15 -Technology
マイニング環境変数とは 環境変数とは、その名の通り、コンピュータやプログラムが動く環境を設定するための変数です。 環境変数の種類 Web開発初心者だと、「環境変数=.env に書くもの」というイメージがあるか… ...
-
DataBricksを使ったSBA 7(a)融資プログラム FOIAデータの分析
2024/02/15 -Technology
マイニング0. はじめに 第2回 金融データ活用チャレンジ(金融データの活用可能性を深化させる業界を挙げた超実践プログラム)のコンペに参加しました。本コンペについては、第1回も参加したのですが、前回はData… ...
-
日本語OCRの使い方まとめ
2024/02/15 -Technology
マイニングtesseract-ocr https://github.com/madmaze/pytesseract インストール sudo apt-get -y install tesseract-ocr t… ...
-
uuidをモックする
2024/02/15 -Technology
マイニング少し手こずったのでメモとして残してきます。 import uuid def get_id(): return uuid.uuid4().hex from unittest.mock import p… ...
-
Djangoの仮想環境立ち上げまで
2024/02/14 -Technology
マイニングDjangoを学習したので忘れないようにメモ デスクトップに作業用フォルダを作成 cdで作業用フォルダに移動 仮想環境を作成 python –m venv Sample コマンドを実行し、venv環… ...