「Technology」 一覧

日本語LLMが多数登場してきて、LLMで遊ぼうというモチベが上がってきたわけですが、今回は、ファインチューニング用のデータセットを改変して遊んでみたいと思います。 元のデータセット 元のデータセット… ...

venvとは Pythonでの仮想環境作成・管理ツール。 Python バージョン3.3以降では、venvは標準ライブラリとして提供されている。 環境 Windows Python 3.10.11 … ...

検証を思い至った経緯 生成AIのブームが起き、ネット上に生成AIを使用して作られたものが増えてきている中で、モデル崩壊に関する論文を見る機会があった。 以上の論文では、小規模なLLMのモデルを使用す… ...

基本使うモジュールのインポート データの準備 基本モジュール #モジュールの読み込み import pandas as pd import matplotlib.pyplot as plt %mat… ...

はじめに 日本で売られている海外からの輸入品が現地ではどのくらいの値段(値段)なのか？ それが現在の為替レートで日本での値段から換算できるWEBアプリ「YEN$CONVERSION」を作りました。 … ...

背景 Kaggleに取り組んでいて、簡単なデータの前処理やバリデーションを用いて予測をしてみたが精度が悪かった。 精度を上げるために何から始めるべきか、検討もつかなかったので できる人のコードを模写… ...

線形回帰 $ y = beta_0 + beta_1 x_1 + beta_2 x_2 + dots + beta_p x_p + epsilon $ ここで： $y$は目的変数 $x… Source ...

標準コンポーネントで日付を入力する：date_input() 日付の入力で使えるシンプルなコンポーネントはdate_inputです。 https://docs.streamlit.io/librar… ...

年月日Pythonについての投稿もかなりのボリュームになりました。まだまだつたないところは多々ありますが、学習というところですので、懲りずに投稿させていただきます。 今回は、日付と時刻を重点的にやっ… ...

イテレータ イテレータとは？ データの流れを表現するオブジェクト 要素を1つずつ取り出せるオブジェクト __iter__()メソッドから取り出されたオブジェクトがイテレータオブジェクト データがなく… ...

「全球及び日本域確率的気候予測データ（d4PDF シリーズ）」―全球データをラスタ化する際の投影パラメータを同定しました。 「全球及び日本域150年連続実験データ」の60km150年連続実験データも… ...

本記事では三次元形状認識を題材とした、外観検査アルゴリズムコンテスト2020「X線CTによる工業製品の内部検査～ボクセルデータからの形状と材質の分類～」^1への提出作品[^2]の解説を行います^注1… ...

背景 PythonでLINE Messaging APIをたたくときにそこそこ詰まってしまいました。 エラー内容でググっても記事がヒットしなかったので、同じエラーで詰まっている人の役に立てればうれし… ...

この記事は、「ジョジョの奇妙な ELYZA-japanese-Llama-2-7b-instruct」とペアになる記事です。コードはほとんど同じで、ELYZA-japanese-Llama-2-7b… ...

日本語が使える大規模言語モデルのひとつ、ELYZA-japanese-Llama-2-7b-instruct を私も使ってみました。何人かの先人が既に使い方を公開されていますが、私の場合はこちらのコ… ...