MySQL

株価データをMySQLに放り込んでます。 NULL、''、' 'など 空白にヒットしない不思議。 目に見えないだけで、なにかがあるのではないか…と妄想しました。 MySQLでASCIIコード表示できるか…。 ASCIIコード0は見えないけど、NUL、\0、ナル文字を表す…らしい。 Pythonで利用するとき欠損値の扱いに困ってましたが、解決のメドが立ちました。 【MySQL上の表示で空白がある売買状況の一部】 株価データをMySQLに放り込んでます。 東証株式相場表日報(PDF)DLし、PDFMinerで文字数字を取り出しCSV化後、MySQLに保管しています。銘柄によっては取引が成立せず、前…

DockerでMySQLコンテナが一瞬だけ起動しても、すぐに停止する問題に遭遇したので、その時の原因と解決方法を備忘録として残しておきます。 発生したこと dockerでmysqlコンテナを起動しようとした。 一瞬、コンテナが立ち上がるものの、数秒すると停止してまう。 環境 PC：Apple M1 Mac MacOS: 14.6.1（sonoma） 発生経緯 以下、コマンドを叩いた docker run --name mysql001 -dit --net network001 \ -e MYSQL_ROOT_PASSWORD=myrootpass \ -e MYSQL_DATABASE=db…

始めに レコードの有効期間を表示したいときに、start_at, end_atのカラムを用いて表現していました。そして、end_atがnullの場合にアクティブなレコードとして表現しようとしていました。しかし、このやり方ではデータの管理方法に失敗するとアクティブなレコードが複数できてしまう可能性があります。 そのため、アクティブなレコードを1つだけに絞りたかったので、別の主キー + end_atでアクティブなレコードであること表現しようとしました。 しかし、その方法がうまくいかなかったので、同じ轍を踏まないようにブログに残しておきます。 環境 MySQL 8.0 PostgreSQL 17.2…

あいさつ こんにちは！ 技術本部 技術戦略Div. リードエンジニアの関根です！ 2024年9月にジョインして、コツコツSRE活動を進めておりますっ エンジニア3年目ながらSREにゴリゴリ関われているのは、アドウェイズにオープンなコミュニケーションの文化があるおかげです。SREに少しでも興味がある人は、お待ちしておりますよ！ 最近、Netflix、アマプラ、U-NEXTに加えてAppleTVも契約してしまいました笑 映画やドラマの話しましょうね！ あとお酒が大好きなので、社内外問わず飲みに行きましょうね！！ この記事はなに？ この記事は、MySQLメジャーバージョンアップグレード時にアップグレ…

タダです. 先日 Aurora MySQL バージョン3 で sql_mode を確認する機会がありました.そこでの学びをまとめておきます. 結論: デフォルトでは sql_mode は何も設定されていない 結論ですが,デフォルトでは sql_mode は何も設定されていない状態です. 何も変更していない場合,設定値が0です 以下のような MySQL のデフォルト値があるわけではないため, Aurora MySQL で利用する場合 sql_mode の挙動が意図通りかは確認が必要です. mysql> SELECT @@SESSION.sql_mode; +-------------------…

タダです. 以前の記事で S3 に格納した Aurora MySQL の監査ログを Athena で検索するためにテーブルを作り,管理者ユーザーのアクセスを検索したことを記事にしました.今回も関連で Aurora への書き込み操作を監査ログから検索する時に使用したクエリを備忘録としてまとめます. sadayoshi-tada.hatenablog.com 監査ログから書き込み操作を検索したときのクエリ 書き込み用のインスタンスにはアプリケーションユーザーや内部利用で使用するユーザーなど様々なアクセスがあると思いますが,認識してないユーザーからの書き込みが発生していないかの検索を監査ログから探り…

こんにちは。サーバーサイドグループの五十嵐です。 最近のマイブームはキャンプギア集めで日々キャンプ動画を漁っています。 今年は登山もやってみたいなと思っているのですが、在宅ワークでほぼ動かない生活をしているので足腰を動かすために毎日ウォーキングするように心がけています。 思い立っては運動し、続けようと頑張っては三日坊主になってを繰り返しています。 はじめに 機能開発が進んでいく中で名前が実態に合わなくなってくることはよくあります。 メソッド名やカラム名などは影響範囲が少なく割と気軽に変更できるため修正することで対応できます。 しかしテーブル名になってくるとかなり大変です。 モデル名と関連のke…

※ この記事はMySQL Advent Calendar 2024 14日目の記事です。 軽めのネタです。 8.0.22からそいつは存在した ALTER DATABASE 文にREAD ONLY オプションというものがあるのをご存じですか？ MySQL :: MySQL 8.0 Release Notes :: Changes in MySQL 8.0.22 (2020-10-19, General Availability) MySQL :: MySQL 8.0 Reference Manual :: 15.1.2 ALTER DATABASE Statement データベースおよびデータベ…

2024/11/18(月) Amazon Auroda MySQL 3.08が一般公開されたので調べてみた。 aws.amazon.com Auroda MySQL 3.08とは MySQL8.0.39をサポートするバージョン。 セキュリティ強化およびバグ修正、可用性向上の対応が行われている。 データベースの作成でエンジンバージョンの選択にあります。

### **概要** Javaでデータベースにアクセスする際に使用される`Statement`と`PreparedStatement`は、どちらもSQLクエリを実行するための重要なツールです。しかし、それぞれの使い方や特徴、安全性の面で大きな違いがあります。本記事では、これらの違いを詳細に説明し、SQLインジェクションを防ぐために`PreparedStatement`がなぜ推奨されるのかを具体例を用いて解説します。 --- ### **1. StatementとPreparedStatementの基本概念** #### **Statement** - **静的なSQL**を直接文字列として指定…

### **はじめに** この記事では、JDBC（Java Database Connectivity）の基本概念、主要なコンポーネント、およびJavaコードの実例について詳しく解説します。初心者でも理解しやすいように、JDBCの基本的な流れから、具体的なコード例までをカバーします。 --- ### **JDBCの基本概念** **JDBC**は、Javaアプリケーションと関係データベースを接続するためのAPIです。統一されたインターフェースを提供し、以下のようなデータベース操作が可能です： - データベースへの接続 - SQLクエリや更新の実行 - 結果セットの取得と操作 JDBCのコアコン…

この記事は Mackerel Advent Calendar 2024 の 13日目の記事です。 Web アプリケーションのパフォーマンスの指標として SQL のクエリの処理時間があげられます。Web アプリケーションでは SQL の処理時間がボトルネックになることも多いです。 Web アプリケーションの SQL の処理時間を計測する手法は多くあります。 このブログでは OpenTelemetry Collector の Connector として 提供されている Span Metrics Connector を活用し Mackerel で SQL のクエリごとの処理時間を計測し、さらに監視設…

こんにちは。STORES 予約 で開発エンジニアをしているmyahagiです。 11月の頭にSTORES 予約 のDBをAurora V2(MySQL5.7互換)からAurora V3(MySQL8.0互換)へ移行しました。 Aurora V2(MySQL5.7互換)の標準サポートが10月末で終了しましたが、サポート終了後、2年間は延長サポート費用を支払うことでバージョンアップせずとも利用が可能といったこともあり、これからアップデートを計画するところもあるかと思います。 今回、私たちがアップデートにあたって事前にどのような検証をし、どういった移行手順で移行を行ったのか、また、移行後に限定的な範…

データベーススキーマを動的に操り、ユーザが持ち込んだ BYODB（Bring Your Own Database）のデータベースとも連携する——こうした特殊な要件に直面したローコードプラットフォームの開発現場で辿り着いた解決策はイベントソーシングと補償トランザクションでした。 本記事では、Ruby on Rails アプリケーションでタイトルのアーキテクチャパターンを実践し、複雑な分散トランザクション問題を乗り越えた手法と、その裏にある思考プロセスをご紹介します。 前半では課題の背景として、ローコードプラットフォームと BYODB 要件がもたらす複雑性を説明します。その後、イベントソーシングや…

Ginza.rb 第86回 - Rails8.0について学ぶぞ - connpass 第86回は、11月にリリースされたRails8.0についてみんなで話し合う回でした。y-yagiさんが作ってくれた資料を使ってワイワイしました。 About Rails 8.0 - Slidev 気になったポイント メジャーフィーチャー扱いだと思われるGetting SQLite ready for productionについては、for productionとはいえ我々(仕事でRailsアプリケーションを書いている人)がSQLiteを本番で使う機会はなかなかなさそうですね、という話をしました。ここで言う"p…

はじめに 今回のスコア Grafana・Loki活用Tips 表示範囲内のログ全てから統計値を計算する レスポンスが遅かったログを特定する スロークエリログの統計値も計算したい 当日やったこと 今後の展望 はじめに これはあくあたん工房アドベントカレンダー 2024 13日目の記事です。他の記事も面白いので、是非見ていってください。 今回のスコア 今年も過去回↓と同じくtaxio、shanpuと3人でチームツナ缶として出場しました。 poyo.hatenablog.jp 最高得点2万点くらい、最終スコア17110点で、おそらく80位前後くらい58位（ChatGPT調べ）くらいでした（failが…

この記事はGunosy Advent Calender 2024の12日目の記事です。昨日の記事はUTさんの「EM（エンジニアリングマネージャ）になって１年半経った振り返り」でした。 はじめに 移行後のコスト削減結果 Aurora I/O-Optimizedとは Aurora Standardの課金体系について Aurora I/O-Optimizedによるコスト最適化 切り替え方法 移行の際の注意点 本番環境でそこまで安くならない場合がある 移行に関して幾つかの制約事項がある おわりに はじめに こんにちは、koizumiです。 去年はSREチームに在籍しておりましたが、今年からサーバーサイ…

www.publickey1.jp AIスタートアップのCognitionは、自律型のAIソフトウェアエンジニア「Devin」の正式サービスを開始しました。 自律型AIソフトウェアエンジニア「Devin」、ついに正式サービス開始。月額500ドルから － Publickey 価格は月額500ドルから。利用回数の制限はなく、Slack経由でのアクセスとVisual Studio CodeなどのIDEからの利用、APIへのアクセス、そしてCognitionによるサポートなどが利用できると説明されています。 自律型AIソフトウェアエンジニア「Devin」、ついに正式サービス開始。月額500ドルから －…