はてなブックマーク

Python でちょっと凝ったログの出力をしたい場合 logging というライブラリを使うのが定番です。また設定には dictConfig を使います。ただ後方互換性のために落とし穴があるので、意図しない動作になる時は disable_existing_loggers を False にするのがコツです。と、いうような話題を書きます。 logging には２つの主要な要素 Logger と Handler があります。 Logger にアプリやライブラリはログを書き込む。 Handler でメインスクリプトはログの記録方法を指定する。 Formatter でログの書式を設定する。 基本の使い方 基本の使い方は簡単です。 # 以下の二行はイディオムです。現在のモジュール名が付いた Logger が出来ます。 import logging logger = logging.getLogger

(この記事の情報は古いです。最近は pip が myproject.toml を理解できるようになりました。Python でパッケージを開発して配布する標準的な方法 2023 年編 に更新版を書きましたので参考にしてください。) 今更ながら Python でパッケージを開発したり配布する標準の方法を知らなかったので調べました。Poetry の方が簡単ですが、人の作ったプロジェクトで仕事するのに覚えておくと便利です。 仮想環境の作成 Python 3.7.7 等の最新の Python が入っていて python コマンドで実行出来るようになっている状態から始めます。これからパッケージを開発するために、他の Python プログラムと利用ライブラリが混ざらないように最初に仮想環境を作ります。仮想環境を作る標準の方法は venv モジュール https://docs.python.org/ja/

デバイスから来るイベントを調べる。 デモのために『リングマウス』 http://amzn.asia/4XB6JeF というのを入手した。Linux からは普通のマウス入力として見える。ただデモではマウスの代わりではなく、ある機能を呼び出すボタンとして使いたいので、左クリック相当のイベントをキーボードの『V』に変換したい。そんな状況になった時のためのメモ。 まず /proc/bus/input/devices でデバイスファイル名を調べる。 $ cat /proc/bus/input/devices ... I: Bus=0003 Vendor=0e8f Product=00a8 Version=0110 N: Name="DaKai 2.4G RX" P: Phys=usb-0000:00:0c.0-1/input1 S: Sysfs=/devices/pci0000:00/0000:00

流行り廃りが激しいのでいつまで使うか知らないが Pipenv https://github.com/pypa/pipenv の事を書く。Pipenv は npm みたいなツールだが、ロックファイルの使い方がちょっと違うのでこれだけ先に書く。 Pipenv では、開発者が Pipfile にインストールしたいバージョンの希望を書き、Pipfile.lock に実際にインストールしたバージョンが記録される。こうして開発者がインストールしたのと同じ環境を他の人も再現出来る。次のように使う。 Pipfile.lock を作成した人と同じ環境を再現したい場合。(npm で言うと npm ci)

標準の https://www.npmjs.com 以外の場所で Javascript ライブラリを管理したい場合、自分で npm registry を運用する必要がある。独自 npm registry として使える物として Artifactry や verdaccio など色々あるようなので調べた。 まとめ http://localhost:4873 に独自 npm registry がある時 レポジトリの設定 パッケージの .npmrc に registry=http://localhost:4873 と書く。 パッケージの公開 (要するに独自 npm registry だからと言って特に特殊な所は無い) npm adduser npm publish パッケージのインストール (Verdaccio の場合独自 registry に無ければ npmjs を探す) npm install

Concourse Tutorial by Stark & Wayne に従って Concourse CI という Jenkins のような物を試す。 Concourse とは、ほぼコマンドラインだけで動作する CI ツールだ。Concourse では、レポジトリやファイルサーバなどの外部の資源を Resource として統一的に扱う。Resource を読み書きする一連の Task をまとめた Job の依存関係を Pipeline と呼び、Pipeline を yaml ファイルを定義する事によって動作を決める。 インストール Docker Compose のある環境なら 以下の手順でローカルに Concourse を構築出来る。リモートに構築したい場合は適当に docker-compose.yml を編集すれば OK。

普段あまり Go を使わない人が仕事で使ってるソースが突然 Go Modules になって困って調べたメモ。 問題の背景 Go では GOPATH という特殊な概念があって、Go のコードはライブラリも含めてすべて $GOPATH/src 以下に置くという約束になっている。そうするとプロジェクトごとにライブラリのバージョンを変えたい場合に困るので、プロジェクト固有のライブラリは $GOPATH/src/プロジェクト/vendor の下に入れても良いことになっている。そうすると go コマンドは vendor 以下を優先して見てくれる。面白い事に、vendor ディレクトリの管理は govendor 等色々なサードパーティツールを使う。 将来の Go 1.12 からこのやり方を改め、$GOPATH/src や vendor は廃止となり Go Modules という物を採用する事になった。現

以下の項目が含まれる oe-init-build-env: 環境設定スクリプト bitbake, bitbake-layers, oe-pkgdata-util: 各種コマンド 用語 layer: conf/layer.conf の置いてあるディレクトリの事 recipe: ソフトウェアの単位 .bb ファイルの事 package: 生成物インストールの単位 dev doc 等に分割出来る。 Bitbake の動作 bitbake recipe で何が起こるか? Bitbake は conf/bblayers.conf を読む Bitbake は BBLAYERS を読む BBLAYER には空白区切りでディレクトリが書いてある (例: ${METADIR}/poky/meta) METADIR とは poky ディレクトリ Bitbake は BBLAYER それぞれの conf/lay

概要 Service Worker とは、バックグラウンドで動く JavaScript。オフラインで動くウェブアプリを作るために便利なイベントが定義されている。今まで Application Cache 等の宣言的なキャッシュ方法が提案されて来たが、なかなか全てのユースケースをカバーするのは難しいので、柔軟なキャッシュを実装するための低レベル API を提案してみたという事らしい。なので、実際には https://workboxjs.org/ 等のライブラリ経由で使う方が楽。 Service Worker の動作には HTTPS サーバか localhost で動くウェブサーバが必要。開発には Web Server for Chrome が便利。他の人に見せたい場合は Github pages や Amazon Cloud Front を使えば良い。 登録と削除 登録には、navigato

会社の予定表として Outloook にお世話になっているが、プログラムで操作する方法を調べた。普通こういうの curl 使うもんだと思うが、最近気に入っている Jupytor 使用。 Outlook の操作には Graph API を使う アプリを作る Outlook を操作するにはまずアプリを登録する。 Application Registration Portal に行く Application Name を決める。 Generate New Password で client_secret を取得。Azure AD 1 を使う場合無くても使える。 Add Platform https://developer.microsoft.com/en-us/graph/docs/concepts/auth_overview に説明があるが、良くわからなかった。自分で調べた結果は以下。 Web

結論: Linux プログラムのメモリ消費量を見積もるには /proc/pid/status の VmHWM が良いと思います。(コメントで教えていただいたが、$ /usr/bin/time -f "%M" プログラム のようにすると簡単に測れます) とある Linux プログラムのメモリ消費量を測りたいのだが、色々な測り方があって微妙に結果が違うので調べてみた。 ps コマンド proc ファイルシステム /proc/pid/status の結果 Valgrind というツールを使う の３つの方法を比較して見る。以下の単純なプログラムを使った。 #include <stdlib.h> #include <stdio.h> #include <unistd.h> #include <string.h> #define HEAP_SIZE 800000000 #define USED_SIZ

勉強のために手元の Ubuntu 16.04 に Jenkins を入れてみた。仕事でたまに使っているが自分で設定するのは初めてだ。最新版はかなり変わってて面白かった。特に Jenkinsfile というテキストファイルで設定を記述する所と、最初から build agent docker を使う事前提になっている(?) のが興味深い。また、オプションで Blue Ocean プラグイン というのを使うと CircleCI のようなイマドキな画面に早変わりする。人気のある OSS 製品が陳腐化するというのは珍しくないが、こうして進歩を止めない姿勢は素晴らしい。 apt でインストール Download の説明に従う。自動更新が使える Jenkins Debian packages が楽そう。 Jenkins の公開鍵を apt-key で apt に保存する。 wget -q -O - ht

Kubernetes の Secret 使い方メモ。 Secret とは? Kubernetes で秘密にしたい設定を Pod 定義とは別に分ける。秘密設定は BASE64 で保存される。Pod からはファイルまたは環境変数で参照する。 Secret の作り方 例として、secretfile と secretenv という二つの秘密を作ります。データを作るには base64 でエンコードします。 $ echo -n 'This is a secret file.' | base64 VGhpcyBpcyBhIHNlY3JldCBmaWxlLg== $ echo -n 'This is a secret env.' | base64 VGhpcyBpcyBhIHNlY3JldCBlbnYu

このメモは、ある USB デバイス (BT ドングル) に不要なドライバ (usbfs) が bind されてしまう問題を調査する過程のメモだ。肝心の問題はまだ解決していない。udev の kmod load $env{MODALIAS} 以外でドライバが bind される事が分かったら続きを書く。 lsusb による接続状態の表示 Linux から見ると USB デバイスは以下のような情報を持つらしい。 Linux マシンは複数の Bus を持つ。 各 Bus は Port を持つ。 各 Port がさらに Port を持つ事もある。 USB デバイスは各 Bus ごとに一意の Device を持つ。 USB デバイスごとに vendor:product の形でデバイスを特定する ID を持つ。 USB デバイスは複数の If を持つ。 各 If ごとにデバイスの機能を特定する Clas

これは Getting Started with Amazon EKS の通りに作業した記録です。 世の中に沢山ある正式チュートリアルどおりにただなぞるだけの記事に存在意義はあるのか ??? と思っていたが自分でも書きます。書いてある通りに作業するのは難しい。四回くらい間違えました。そういう時意外と他人の記事で気付かされた点がありました。 この記録が英語版を参照しているのは、最初あまりにも上手く行かなくてに日本語版が間違っているのでは? と疑った名残です。多分日本語版でも大丈夫です。 作業の概要 準備: IAM Role や EC2 key pair を作る kubectl と heptio-authenticator-aws のインストール。aws コマンドの設定 CloudFormation で VPC を作る。VPC の情報はクラスタとワーカーノードの作成に使う。 aws eks c

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article?

import React, { Component } from 'react'; import logo from './logo.svg'; import { Image, StyleSheet, Text, View } from 'react-native'; const Link = (props) => <Text {...props} accessibilityRole="link" style={StyleSheet.compose(styles.link, props.style)} /> class App extends Component { render() { return ( <View style={styles.app}> <View style={styles.header}> <Image accessibilityLabel="React logo"

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article?

Linux の音声入出力の設定方法について調べた。目標: 組み込み Linux で自由に入出力先を設定出来る事。 ALSA と PluseAudio の関係 歴史的な理由からか、Linux の音声入出力は PulseAudio と ALSA の二階建てになっている。ALSA は個々のサウンドカードを担当するのだが、一つのサウンドカードには一つのアプリしかアクセス出来ない。複数のアプリの音声入出力を調停するのは PulseAudio が担当している。具体的には、次のようになっている。 ALSA は色んなサウンドカードを統一的に操作出来るようにする仕組み。 アプリは直接 ALSA を操作しなくても良い。 あるアプリが ASLA 経由でサウンドカードを操作している間、他のアプリからそのサウンドカードを使えない。 とはいえ、直接 ALSA を使って音声入出力を行うアプリが存在する。 PluseAu

#!/usr/bin/env python # Time server program import socket import datetime import sys HOST = '' # Symbolic name meaning all available interfaces PORT = 50007 # Arbitrary non-privileged port s = socket.socket(socket.AF_INET, socket.SOCK_STREAM) s.setsockopt(socket.SOL_SOCKET, socket.SO_REUSEADDR, 1) s.bind((HOST, PORT)) s.listen(1) while True: conn, addr = s.accept() now = datetime.datetime.now().is

このプログラムは以下のように動く。 HTML は２つの状態を持つ 起動時: #login だけ表示。Log in with Spotify ボタンの表示。 ログイン時: #loggedin だけ表示。ユーザ情報を表示。 Log in with Spotify を押すと /login に遷移。app.js が必要な情報を埋めて https://accounts.spotify.com/authorize にリダイレクト。 client_id: Client ID scope: 'user-read-private user-read-email' などアプリで使いたい情報 redirect: 認可が終わった後リダイレクトする URL state: ランダムな文字列。クッキーにも入れておいて後でリダイレクトから戻ってきた値と比較する。 https://accounts.spotify.com/

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article?

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article?

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article?

注: この記事は結構古いです Unknown にアクセスしたい。- TypeScript で外部データを型安全に読み込む。 - Qiita も見て下さい。 TypeScript にもだいぶ慣れてきた。慣れてくると間違えやすい部分もはっきりしてきた。それが Type assertions (キャスト)。Type assertions を使うと、実際のデータがどうであろうが強制的に型情報を書き換えてしまえるので、有り難い Typescript の型チェックをすり抜けてしまう。Typescript では Type assertion を使う代わりに実行時型チェックを強制する Type Guard という仕組みがあるので試してみた。 失敗例 まずは Type assertions を使ったよくある失敗例。JSON データの内容によって別の型として扱おうとしている。 interface Song {

Bitbake というのは Yocto Project で使われるビルド用のツールです。Make のように依存関係を調べて必要なタスクを行う仕組みです。文法が妙なのと、読み込まれるファイルが暗黙のうちに決まってとっつきにくいので、Bitbake のマニュアルの Hello World サンプルを元に、Bitbake の基本機能を調べました。 作るもの サンプルレポジトリ https://github.com/propella/hello-bitbake に以下があります。 プロジェクトフォルダ ~/bbtest/myproject: プロジェクトの全体的な設定をここに書く。 conf/bitbake.conf: 設定ファイル conf/bblayers.conf: レイヤを読むディレクトリを指定する。 classes/base.bbclass 自動的に読み込まれるクラスファイル。全てのレシ

Redux 用語 Action: 状態を変えるためのコマンド (コマンドパターン) Reducer: 古い State と Action から新しい State を作る関数 Store: action を受け取り Reducer を実行して State を返す。Store は reducer から作る。 store.dispatch(action) で store に action を送る。 createStore(reducer) を使って reducer から Store を生成する。 構成 もしかして他の react-redux プロジェクトでも使われるかも知れないのでディレクトリ構成を書く。 components: 見た目だけの静的な Representational Component (カスタム HTML タグ) を置く。 Component は props を受け取りタグを返

ふと思い立って Rust という言語である自分用のツールを書いた。大変気に入ったのでメモを残す。 基本情報 ウェブサイト: https://www.rust-lang.org/ 色んなインストール方法があるが、周辺ツールを使い始めると結局本家お薦めの curl https://sh.rustup.rs -sSf | sh が一番良かった。 チュートリアル: https://doc.rust-lang.org/book/guessing-game.html Rust の基本が書いてあるが、一番面白い参照について触れてない。 参照について https://doc.rust-lang.org/book/ownership.html Ownership, References and Borrowing, Lifetimes の三章で Rust の Rust らしい部分が解説されている。 引っかか