地方エンジニアの学習日記

興味ある技術の雑なメモだったりを書いてくブログ。たまに日記とガジェット紹介。

2024-09-01から1ヶ月間の記事一覧

【MySQL】MySQLにクエリを投げて指定された文字列と同じかを比較するツールを書いた

github.com ファイルで渡したクエリを投げて引数で渡した値と一致しているかを見るためのツール。引数の部分を動的に変えることで日時で確認したい項目とかのチェックに使える。一致していない場合は終了ステータスを分けるという感じのツール。 余談 vimか…

【旅行記】栃木旅行に行ってきた

9/21-23で栃木旅行に行ってきた。宇都宮、日光、鬼怒川、那須あたりで2泊3日。 雨 pic.twitter.com/jiVNQjL0M6— RyuichiWatanabe@gurasan (@ryuichi_1208) 2024年9月21日 日光東照宮は思っていたよりも小さいなとなった。建物自体はすごく豪華で見応えがあっ…

【AWS】Amazon Neptuneとは

aws.amazon.com Amazon Neptuneは、フルマネージド型のグラフデータベースサービスで、AWSによって提供されます。グラフデータベースは、ノード（頂点）とエッジ（辺）で構成されるグラフ構造を使ってデータを格納し、複雑なリレーションシップを持つデータ…

【curl】8.10.0が出ていた

curl.se autotools: add `--enable-windows-unicode` option curl: --help [option] displays documentation for given cmdline option curl: add --skip-existing curl: for -O, use "default" as filename when the URL has none curl: make --rate accept…

【LLM】Ollamaとは

ollama.com Ollamaは、ローカル環境でLLMを実行するためのオープンソースのプラットフォームです。これにより、クラウドに依存せず、自分のコンピュータ上で直接LLMを利用できるようになります。主にLlama2やMistralといったモデルをサポートしており、コマ…

【LLM】ローカルLLMとは

ローカルLLMとは？？と思ったのでまとめ。豪華な自宅サーバを持っている人の趣味なんだろうなぁwって印象だったが実はそんなこともないというのがわかった ローカルLLMとは ローカルLLMとは、ローカル環境で動作する大規模言語モデル（LLM: Large Language M…

【LLM】GPUはどのように使われるのか

GPUがどこで使われているのか微妙に理解してなかったのでそのまとめ記事。LLMの勉強をしていて勢いでローカルLLMやりたくなってGPU買おうと思ったけど思ったより高くてとりあえず色々調べてみるか...となったのが今ここ。売れ筋とか見ても自分の想像してる価…

【登壇】IT 運用管理セミナー 2024 夏で登壇してきた

members08.live.itmedia.co.jp 基調講演という話をもらって登壇してきた。「こんな話をしてほしい」みたいな感じで始まって実際に話す内容を事前に打ち合わせしつつ決めていくというのはこれまでやったことがないので良い機会でした。 speakerdeck.com 内容…

【LLM】ベクトルデータベースとは

ベクトルデータベースとは ベクトルデータベースは、データをベクトル（多次元の数値データ）として保存・検索・処理するためのデータベースです。特に、近似最近傍探索（Approximate Nearest Neighbor, ANN）に特化しており、高次元空間におけるデータの類…

【LLM】ChromaDBとは

www.trychroma.com ChromaDBは、ベクトルデータを効率的に保存し、検索するためのオープンソースのベクトルデータベースです。特に、機械学習モデルや自然言語処理（NLP）で生成される高次元ベクトルを扱うために最適化されています。ChromaDBは、ドキュメン…

【LLM】Embeddingとは

Embedding（エンベディング）とは、情報をコンパクトな数値ベクトル（多くの場合は高次元ベクトル）に変換する技術を指します。主に機械学習や自然言語処理の分野で使用され、文章や単語、画像、その他のデータを数値の形で表現することで、コンピュータがそ…

【LLM】RAGってなんだ？ってなったので調べた

最近よくきくRAGがなんなのかよくわかっていないので調べたメモ www.hicareer.jp 最初聞いた時はこっちを思い浮かべたがググっても全く出てこないので取り残されている 目次 目次 RAGとは RAGの仕組み RAGの特徴 メリデメ RAGの利点 RAGの欠点 実際の応用 RA…

【PostgreSQL】物理レプリケーションとは

www.fujitsu.com PostgreSQLの物理レプリケーションは、データベースの物理的なデータ（つまり、ディスク上のバイナリファイル）を基にデータベース全体を複製し、データベースの可用性やデータの冗長性を確保する方法です。これは、マスターサーバー（プラ…

【memcached】1.30が来ていた

github.com バグフィックスがメインとProxyモードの古い構文の削除あたり。機能追加が最近見ていても大きいものがない。Proxyモードもついに枯れてきてGAする感じになる流れだろうか？楽しみである。

【Redis】クラスターモードで使えるコマンド集

ローカルのメモがいっぱいになってきたのでブログに転記しておく。 # クラスタ全体の情報を取得 CLUSTER INFO # クラスタ内のすべてのノードのリストを取得 CLUSTER NODES # 新しいノードをクラスタに追加 CLUSTER MEET <ip> <port> # クラスタからノードを削除 CLUSTE</port></ip>…