JSON

最近RustでCLIを作るのに突然ハマってきたのと、ISUCON が近づいていることもあって、以下のCLIを作ってみました。github.com 使い方 思想 private-isu でちょっと使ってみた様子 作ってみての感想 使い方 現状はnginxのlog_formatをJSONとした上で特定のキーを持っていることを想定しています。 (こういう感じの設定をしておく👇) log_format json escape=json '{' '"time":"$time_iso8601",' '"host":"$remote_addr",' '"method":"$request_method",'…

jq の使い方 いつも忘れるので、ここに書いておく。 なんとなく、ジェネリックな内容はブログに書いておいた方が良い予感がしている。 JSON から特定のキーを指定し、その値を取得する。 jq '.somekey[] | .nextsomekey' ./filename.json 例えば、grpcurl なんかで fileByte が返ってくる場合。 下記のようにすれば元のファイルに復元できる。（PDFが降ってくる場合） jq '.files[] | .fileBytes ' ./inpute.json | head -1 | sed 's/\"//g' | base64 -d > output…

本文 C++ JSONライブラリ glaze ver4.0.0くらいについて。 そのままではstd::variant<Enum, std::string>に整数をreadできないのでcustomする。 ダメな例: #include <glaze/glaze.hpp> #include <print> #include <string> #include <variant> constexpr auto buffer = R"( { "key": 42 } )"; enum class Enum : int {}; struct test { std::variant<Enum, std::st…

JSON データとらめっこしたり値を拾ってコピペしたり、なんて作業をしてると(主に AWS-CLI の出力だったりしますがw)、以下の理由でちょっとつらみを感じたりします。 URI 文字列等はエスケープが多くて、コピペの際に加工が必要になる。 めっちゃ長いデータがブラケットや閉じ括弧で余計に見た目長くなる。 そんな時「YAML だったら少しは読みやすくなるのになぁ、あそうだ、jq があるんだから yq もきっとあるよぬ」ってなって発見したのがこれ。github.comjq に YAML/XML/TOML のプロセッシング機能を追加した、Python 製ラッパーだそうです。持ってると幸せになれそ…

pythonで解析をして、それのログファイルを残したい 単純なログファイルなら、必要な情報を書いてテキストファイルにしておけば良い今回はそのログファイルをwebページ(html+javascript)で読み込んで、ページに要素として並べたいなので、ログファイルの形式はcsvかjsonか、または直接javascriptの形式にして書き出すかに絞られる csvはpythonで入出力の関数がそれなりに用意されているので簡単な気がするが、 今回はjson形式で読み書きすることにするpythonでのjson形式の読み書きのほぼ全ては以下のページにまとめられている とりあえずこれを上から読んで実行していけ…

SharePoint Onlineのリストで1行テキスト列に書式設定を行いたい場合、UI上では思うように書式設定ができません。 ですが、JSONコードを使うことで、自由に書式設定が可能となります。 本記事では、JSONコードを使った書式設定方法についてご紹介します。「1行テキスト列に目立たせたい項目があるものの設定方法が分からない」という方は、ぜひ参考にしてみてください。 書式設定前後の比較 書式設定前 書式設定後 設定手順 まとめ 書式設定前後の比較 まず最初に、書式設定する前と後の見た目の変化をお見せします。 書式設定前 SharePoint Online既定の書式のまま作成した場合は、下…

jsonファイルを作るときに、 辞書型のkeyをシングルコーテーションで括っているとこのエラーが表示される (一応jsonファイル自体はできていたが・・・・) ■ 参考 : Python JSONデータ読み込み時にエラーが発生する (Expecting property name enclosed in double quotes)

こんにちは。ノバセルでエンジニアをしている新開です。 この記事は ノバセル Advent Calender 12日目です。 はじめに QuickSightはAWSの強力なBIツールであり、データの可視化を効率的に行うことができます。 QuickSightを使ってダッシュボードを作成し、データ分析を効率化する事例が増えています。 しかしダッシュボードの変更が正しく反映されるかを手作業で確認するのは非効率です。 本記事では、この課題を解決するために継続的インテグレーション (CI) によって変更点の自動テストを導入するテンプレートを解説します。 自動テストの必要性 QuickSightのダッシュボ…

この記事は、NTT Communications Advent Calendar 2024 12日目の記事です。 Azure Databricksを使ってレイクハウスアーキテクチャのログ基盤を構築し、 構造化されていないアプリケーションログの保管や加工、分析を試します。 はじめに レイクハウスアーキテクチャ ログ基盤とレイクハウス Azure Databricksでアプリケーションログを分析する Azure Databricksの準備 Terraformを使ったリソース作成 カタログとスキーマの作成 ログの取り込み ログの加工 BronzeからSilver SliverからGold ログの分析…

この記事は Akerun - Qiita Advent Calendar 2024 - Qiita の 12日目の記事です。 こんにちは、Miwa Akerun Technologiesが運営する賃貸住宅管理システムの開発チームでエンジニアをしている島田です。 このチームでは、CIツールにCircleCIを利用しています。 今回はCIの設定(.circleci/config.yml)を見ながら、これまでのチームの課題とその改善活動を振り返りたいと思います。 前提 当初のCI設定 APIドキュメント 課題 改善案 ER図 課題 改善 コードの複雑度 課題 改善 まとめ 前提 CI設定の説明をする…

こんにちは！エンジニアの藤井（touyou）です！ この記事はGoodpatch Advent Calendar 2024の12日目の記事になります。 みなさん、Figma、使ってますか？ 自分は現在、社内のデザインシステムチームにエンジニアとして参画して、デザインシステムの成長にエンジニア視点で貢献するということをサブプロジェクト的に取り組んでおり、デザイナーと一緒に有効性を検証するテストに参加したり、インタビューの分析をしたり、実際のドキュメント執筆に携わったりなど、職種の域を超えて活動しています。 その中でも直近力を入れて取り組んでいるのが「Figmaプラグイン開発」です。 実際のサブプ…

kubell Advent Calendar 2024 の投稿です。 [^1] qiita.com この投稿では、スキーマ駆動開発と Mocking について書きます。 tl;dr 前提 BPaaS サービス REST を選択した背景 スキーマ駆動開発 課題と解決策 課題 1. 外部 API 依存テストにおける信頼性向上 課題 解決策 課題 2. スキーマ駆動開発におけるモック必要性 課題 解決策 開発フロー Summary

Line Notifyが終了しちゃう 今まではGoogleClaendarに予定追加されたらIFTTT使ってLineNotifyで通知してたんだけど、2025年3月いっぱいで終了しちゃうとのことで、乗り換えなきゃ！ってことで色々調べてGAS使って通知するようにしてみた。

初めに こんにちは、やしきんです！ こちらはSORACOM Advent Calendar 2024の12日目の記事になっています🌟 他にも素敵な記事がいっぱい掲載されていますのでぜひ以下のリンクからアドベントカレンダーをご覧ください👍 qiita.com 今回はSORACOM LTE-M Button for Enterprise（白ボタン）と AWS Lambda を利用してDiscordのチャネルに帰宅通知を送るれるようにしてみました。 ざっくり手順 SORACOM Funkと連携したAWS Lambdaでデータを受け取れる簡単なコードを実装 DiscordのWebhookを作成する D…

はじめに 新宿御苑.wasm、ありがとうございました！刺激的だった〜 nikkieです。 先日Groqへのリクエストを例に、HTTPクライアント HTTPXをRESPXでモックしてテストを書きました。 その中の宿題事項にアプローチします。 ヘッダやJSON形式のデータもモックに指定できるか 目次 はじめに 目次 結論：宿題に取り組んだ後のテストコード 前回のテストコード 環境変数GROQ_API_KEYはmonkeypatch.setenv() RESPXできめ細かなモック mock()に代えてrespond() まとめ：リクエストのヘッダやデータもassertするテストコード 終わりに 結論…

今年の2月にAppleが公開したPklは、2024年に僕がいちばんグッときたAppleプロダクトだ。Pklは、設定ファイルを生成するためのプログラミング言語と言える。設定ファイルといえば、いまどきはJSONやYAMLが一般的だろう。Pklは、JSONやYAMLなどを生成するためのプログラミング言語なのだ。「JSONやYAMLなんて、自分で書けばいいじゃん」ですよね。JSONやYAMLは、XMLの書きにくさや非効率を解消するために生まれた側面もあり「書きやすさ」も魅力のひとつ。ただ、人間が手で書くとどうしてもミスが入るのが現実だったりもする。Pklは、JSONやYAMLのように書きやすいうえに、…

はじめに この記事は every Tech Blog Advent Calendar 2024 11 日目の記事です。 こんにちは。DELISH KITCHEN 開発部 RHRA グループ所属の池です。 2024年6月、エブリーは5つの小売アプリの運営について事業譲渡を受け、『 retail HUB 』へ移管しました。 移管してから半年間、引き継ぎ元の企業様からサポートをいただきながら、システムの移管と運営を行ってきました。 システムの移管は、システムを構成する各種サービス・ツールの公式の移管手順に従って基本的には行いますが、中には記述が不明瞭な場合もあり、試行錯誤が必要でした。 本記事では、…

AWS re:Invent ふりかえり勉強会「クラスメソッド re:Growth 2024 大阪」 AWS re:Invent ふりかえり勉強会「クラスメソッド re:Growth 2024 大阪」 - connpass re:Inventの振り返り勉強会ですね。 早速開催してくれて助かります！ セッション ついに来た！Amazon Elastic VMware Serviceの爆速キャッチアップ arapさん VMWare買収に寄るポートフォリオ削減、Broadcomによるライセンス規約変更 レパートリー削減、実質値上げ、AWS再販停止 Amazon Elastic VMware Servi…

Dependabotの件数をGithubのREST APIで取得する方法を残しておく。 会社で毎月脆弱性のチェックをしている。 各リポジトリごとに、 Severity：critical、high State：open の件数を調査している。 利用するAPIのエンドポイントは以下になる organizationの場合：Dependabot alerts 用の REST API エンドポイント - GitHub Docs enterpriseの場合：Dependabot alerts 用の REST API エンドポイント - GitHub Docs 以下はorganizationの場合のリクエス…