はてなブックマーク

ここ半年くらいで参考になった情報のメモ。 環境 Python 3.6.1 Pythonは、一部を除いて現時点での最新バージョンを使用していますが、そんなに古くなければたぶんOKです。 また、動作はWindowsで確認していますが、明示した箇所以外には特にOSに依存するところはないと思います。 ログインした状態でWebページ取得 ログインしないと見られないページを、Beautiful Soupでパースしたいときなどに使いました。 この例は、Requests という追加モジュールが必要です。Anacondaフルパッケージには入っています。 今回は、バージョン2.13.0を使用しました。 Requests: HTTP for Humans — Requests 2.13.0 documentation Requests: 人間のためのHTTP — requests-docs-ja 1.0.4 d

個人的なコードを書いている中で、重みを付けた乱数列が必要になりました。 具体的には、数が大きいほど発生頻度が高くなるような乱数の生成です。 これについて、どうするのが一般的なのか知らなかったので、調べてみました。 （結論から言うと、一般的な方法がこれ、というのは分かっていません。） 計算式自体は言語を問いませんが、実装例はJavaを使っています。 実行環境 サンプルコードでストリームやラムダを使っているため、Java8以上が必要です。 Java8 Windows 7 64bit JREu101 重み付け無しで乱数列を生成 intの乱数列を取得するのに、以下のコードを実行しました。 IntSupplierのラムダ式を変更すれば、乱数生成方法を変えることができます。 乱数生成関数を用意する必要が無ければ、java.util.Randomクラスのints()メソッドで乱数のIntStreamが得

Pythonを日常的に使うようになって、2か月*1が経過しました。 だいぶ馴染んできたので、何か作業の練習をしてみることにします。 はじめに 私にとってのPythonは、ツールとしてはほぼ定着したと思います。（アプリ開発はまだ勉強しないと無理。） とは言ってもまだ実用的な仕事をさせたことが無いので、課題として、 「複数のExcelファイルからデータを取得して、グラフをプロットして画像として保存」 というのをやってみます。 グラフの使い方はテキトーです。 Excelを使っているのは、Excelを使う人にもPython便利！と思ってもらう目論見があったり無かったり。 環境 Windows7 64bit Python 3.5.1 Anaconda3 v4.0.0 使用モジュール バージョンは省略。 Anacondaがあればこれらが全部使えるところが良いですね。 os, glob ⇒ 主にファイル

突然、ゲームを作ってみたくなりました。 ミニゲーム的なものは過去に何度も作ったことはありましたが、アクションとかRPGのような本格的なゲームは作ったことがありません。 それで、欲張りなことに、UnityやAndroidやSwift、つまりゲームエンジンやスマホアプリ開発に手を出そうとしています。なお、全然捗っていません。集中できるまとまった時間が確保できないと頭に入ってこないのです。 そこで、やはりというか、Javaでできる範囲なら、片手間でもなんとかなるんじゃないかと思いました。 手始めに、手元にある無線ゲームパッドの入力でキャラクターを動かすのに挑戦。 詳しくは後述しますが、JInputを使うことにしました。 今回は、JavaでJInputを使って、ゲームパッド*1の入力を判定する練習をしてみた話です。 JInputに決めた経緯 最初は下記のサイトなどを参考にして、LWJGL2か3を試

我が家のパソコンのうちWindows8.1のノートパソコンだけ、ルーターとの相性が悪いのか、2日に1回程度はネットワークが切断されてしまいます。 そのため、2クリックでネットワーク接続を再起動するスクリプトを書いて対応しています。 Windows ネットワーク接続を2クリックで再起動する仕掛けを作る - argius note http://argius.hatenablog.jp/entry/2015/09/14/192706 これ自体は上手くいっているのですが、何か作業中に切断されてそれに気づかないで作業を続行したりすると、困る場合もけっこうあります。 切断されてしまうのは仕方ないとして、なるべく早くそれに気づきたい。 それなら、ネットワークがつながっているかを定期的にチェックして、切れていたらアラームで通知する仕掛けを用意すれば良いのでは？と思いました。 こういうのはフリーソフトなど

またかなり間が空いてしまいましてすみません。 今さら感あふれるネタですが、知らなかったのでメモ。 結論を先に書きます。 下記ページで知りました。 java - Resetting Standard output Stream - Stack Overflow http://stackoverflow.com/questions/5339499/resetting-standard-output-stream System.in, System.out, System.errの再初期化は、下記のようにします。 FileDescriptorを使うのがポイントです。 // import java.io.*; System.setIn(new BufferedInputStream(new FileInputStream(FileDescriptor.in))); System.setOut(ne

かつて、自分がまだBASICしか知らなかった頃のこと。 何かのテレビ番組で、C言語のソースをちらっと見せていたのを見て、物凄い違和感を感じたことを思い出した。当時の自分にとってはプログラムに行番号があるのが当たり前だったので、カッコとセミコロンで記述されたCのプログラム*1を見て、「行番号がないのにどこから実行するんだろう」とか「カッコ（中括弧）の外と中に命令らしきものがあるけど、どういう順番で実行するんだ？」とか思ったりした。もう十数年以上前の話だけど、とても鮮明に覚えてる。マシン語をBASICの拡張機能だと誤解していたこともあって、これが、初めて「多言語」を意識した瞬間だったと思う。 今思うと、行番号なんてものの方が特殊*2だし、関数というのも当たり前の感覚になってるのに、この感覚、つまり、行番号がないことや関数の存在に対する違和感が実感できるのが面白い。 *1:おそらく"hello,

テキストデータを読み込む場合、言語にかかわらず1行ずつ読み込んで処理します。ここではこのイディオムを"read-lines"と呼ぶことにします。 スクリプト言語なんかだと大抵、最初からforeachで済んでしまっていたりしますが、初期のJavaではちょっと面倒な手順が必要でした。 新しいバージョンではだいぶ簡単簡潔に書けるようになりましたが、今度はたくさんありすぎて、どれがなんなのかが良くわからなくなっています（大袈裟）。 そこで今回は、"read-lines"の変遷についてまとめてみました。 最近Javaを始めた方がバージョンが古い時に書かれたソースコードを読むときに役に立つ...かも知れません。 目次 基本 BufferedReader （Java1.1～） Scannerと拡張for文 （Java5～） java.nio.file.Filesとtry-with-resources（J

以前、このような記事を書きました。 Concurrency Utilitiesを使った並列処理・マルチスレッドのおさらい (2013-12-26) 前回の内容は、Concurrency UtilitiesだけでなくJavaのマルチスレッドの話も一部含んでいましたが、今回は、Concurrency Utilitiesだけにフォーカスして、全体が分かるように整理してまとめ直しました。 目次 概要 準備 タスク・フレームワーク (Executor) 同期キュー シンクロナイザー 並行処理コレクション 時間単位 アトミック値型とアトミック操作 ロック・フレームワーク 概要 今回は、Concurrency UtilitiesのAPIをいくつかのグループに分類し、それぞれのグループの主要な機能を「広く浅く」紹介する、という形式でまとめています。 パッケージ単位で分け、それからjava.util.con

ちょうど1ヶ月前に、カスタムDocletでJavadoc情報をCSV出力というエントリーを書きました。 今回は、Java8から使えるようになった、javax.tools.DocumentationToolを使ってJavadocを実行するプログラムを試します。 環境 Windows7 Professional 32bit Java8 ea (b121) 概要 Java8の新機能「Javadoc APIのjavax.toolsへの追加」（Java SE 8 (5) - プラットフォーム、セキュリティー、他参照）により、tools.jarを使わなくてもJavadocをプログラムから呼び出すプログラムが書けるようになりました。 ただし、実行するときは、これまでと同じく、クラスパスにtools.jarを設定する必要があります。コンパイル時に不要になったということです。 プログラム例 javax.to

システムスレッドについて、あまり知らなかったので、調べてみました。 それ以外にも、APIで生成されるスレッドや、スレッドグループについても、少し触れています。 ※GrepCodeは2018年5月頃からサービスが利用できなくなっています。記事中のリンクはGrepCodeのものがそこそこ多いので、ご注意ください。 参考リンク HotSpot Runtime Overview - OpenJDK JVM Internals (JamesDBloom - Blog) Java SE 8 API仕様 GC: openjdk-8-b132.jar - GrepCode Java Project Source Mirror of OpenJDK repositories - GitHub 目次 はじめに 実行環境 システムスレッドの名称と簡単な説明 APIを使用したときのスレッド おわりに はじめに シ

Eclipse JavaEE 4.4 (Eclipse IDE for Java EE Developers Luna) とTomcat7を使って、JavaEE6の開発環境を１から構築します。 JavaEE6入門ではなく、JavaEE6入門のためのEclipse環境を作るのが目的です。 今回はスクリーンショット多めにしてみました。 pom.xml https://gist.github.com/argius/91f74ea87e3bee10d1f1 （同日 22:00頃）記述ミスと記述不足を20箇所ほど修正しました。概要の文章を少し手直ししました。 目次 概要 前提条件 初期設定 ソフトウェアのインストール Eclipseの起動 プロジェクトの作成 プロジェクトの設定変更（Mavenの設定変更） デバッグ用サーバーでHello World ! EL式の動作確認 JSTLの動作確認 テスト用

Skinny Framework（以降skinnyと表記）のTIPS、第2弾です。 TIPSと言うより、レシピ集に近いかも知れません。 ※この記事は、Skinny Framework 1.2.8時点のものですが、おそらく、Skinny Framework 1.1.0以上なら同様に使えると思います。なお、文中のソースコードへのリンクは、1.2.8になっています。 ※サンプルでテンプレートを使用している箇所は、Jadeでの例です。 目次 ジョブ（バッチ）を作って実行する ScaffoldのSkinnyResourceアクションと個別処理を混在させる Web APIを作る (jQuery+JSON) ページボタンリストのカスタマイズ ユーザーの言語設定に応じてメッセージの言語を自動選択する（簡易実装） ジョブ（バッチ）を作って実行する 裏でデータベースの更新をするジョブ（バッチ）をskinnyで

サンプル作ったらボツになったのでここに書くことにします。 HTTPで結果をJSONで返すWebサービスがあって、そこにコンソールアプリからアクセスするというものです。 なお、C#はほぼ初心者で、特に.NETはAPIがほとんど分かりません。MSDNとか検索で調べた結果をまとめたものです。 エントリの最後にコードの最終版を載せています。 やりたいこと。 コンソールアプリ コマンドライン引数をパラメータにする（URLエンコード） HTTPアクセス JSON解析(静的) 環境 Windows 7 Professional 32bit Visual Studio Express 2012 + .NET Framework 4.0 VSは.NET 4.0 に対応していればこれより古くてもたぶんOK JSON直列化（後述）は4.0以降 余談ですが、最近Visual Studioに慣れてきて、使うのが楽し

Skinny Framework（以降skinnyと表記）を使っていく中で、こういう時どうする？みたいなのがいくつか蓄積されたので、まとめてみました。 TIPSと言って良いものかどうかはさておき。 ※この記事は、Skinny Framework 1.1.0時点のものです。また、Skinny Framework 1.0.18でも同様に使えます。 目次 画像ファイルをアプリケーションに追加する カスタムcontrollerのMIMEマッピングをデフォルトに合わせる Javaファイルをアプリケーションに追加する ページごとのタイトルをlayoutテンプレートの中で切り替える ファイルアップロード機能のサンプル エラーなどのメッセージを表示する 画像ファイルをアプリケーションに追加する runモードかwarで動かしている場合は、例えば./src/main/webapp/img.pngにファイルを置

Windows7でExcel2010,Word2010の読み取り専用 Windows7のExcel2010では、WindowsXPのExcel2003のときと読み取り専用の設定方法が少し変わっています。 なお、WindowsVista、Excel2007、Word2007は手持ちが無いので分かりません。ご了承ください。 （注：時間がないので走り書き。あとで整理するかも。） 追記(2014-06-06): 整理しました。 Windows7では、拡張子ごとの設定を自由に変更できなくなってしまいました。 なのでregeditだけで変更することになります。 Excel2010の設定 Excel2010（Excel2007から?）では、ファイルを開いてから読み取り専用に変更できるようになりました。 クイックアクセスツールバーの「読み取り専用の設定/解除」(名前が探しにくい...)を使うと、ファイルを

Skinny Frameworkで作ったWebアプリをHerokuにアップしてみました。 ※この記事は、Skinny Framework 1.0.13時点のものです。 概要 Skinny Framework（以下、skinnyと表記）は、Herokuをサポートしています。 Packaging - Skinny Framework Deployment on Heroku を参照 ただし、現時点ではWindowsの場合に注意すべき点があるので、それについては後述します。 開発環境 Windows 7 professional 32bit Skinny Framework 1.0.13 (skinny-blank-app.zip) heroku/toolbelt/3.7.3 (i386-mingw32) ruby/1.9.2 準備 以前、Play2でHerokuを使った（下記リンク参照）ので、

今回は、javacを使わずにclassファイルを作ってみます。 Apache Commonsのライブラリに"BCEL"というものがあります。これはフルネームで"The Byte Code Engineering Library"というライブラリで、名前のとおりバイトコードをエンジニアリングするライブラリです。これを使えば、Javaのクラスファイルフォーマットを熟知していなくても、バイトコードを直接変更したりすることができます。 変更だけでなく、ゼロからclassファイルを作ることも可能です。 詳しくは、以下のページを参照してください。 Apache Commons BCEL™ - Byte Code Engineering Library (BCEL)（英語） Jakarta BCEL -- バイトコード処理ライブラリ -- - Byte Code Engineering Library

このエントリーでは、これまでに紹介した機能以外の、新しいAPIと改良されたAPIについてまとめています。 (2014-03-21追記)APIドキュメントのリンクを差し替えました。 目次 ラムダに伴うコアライブラリーの拡張 内部イテレーターとIterable#forEach Comparatorの拡張 プリミティブラッパークラスの二項演算子的メソッド 新しい日付・時刻API Base64エンコード・デコード 並行処理APIの改良 JDBC 4.2 配列の並列ソート RFC 4647 (BCP 47) 言語タグマッチング Unicode 6.2 サポート その他の拡張 ラムダに伴うコアライブラリーの拡張 ラムダ式の導入に伴い、コアライブラリーにもラムダ式を使ったメソッドが多数、追加されました。 ここでは、次の3つに絞ってご紹介します*1。 内部イテレーターとIterable#forEach C

このシリーズは、2014-03-18に正式リリースが予定されている、Java SE 8の新機能と拡張機能についてまとめたものです。 (2014-03-21追記)予定通り、2014-03-18（現地時間）にリリースされました。APIドキュメントも公開されたので、そちらに差し替えました。 ここで触れている内容の範囲では、今後おそらく変更は無いと思いますが、リリース後に確認する予定です。 また、外部リンクについては、リリース後に変更する可能性があります。 目次 シリーズ目次 コンポーネント別　一覧 実行環境 注記 参考リンク シリーズ目次 Java SE 8 (1) - 概要と一覧 （このエントリー） Java SE 8 (2) - ラムダ式、メソッド参照、ストリーム ラムダ式とメソッド参照 ストリーム Java SE 8 (3) - 新しい言語機能 仮想拡張メソッド 実行時のパラメーター名への

この記事は、個人的なおさらいのための、Java Concurrency Utilitiesの一部を使ったサンプルとメモです。 目新しいものは特にありません。 記事内のサンプルとAPIドキュメント参照はJava7(Java SE 7)を基準にしていますが、Java Concurrency Utilities自体は一部を除いてJava5(Java SE 5.0)から使えるようになっています。 あと、いつものことですが、画像がありません。 追記(2014-01-05): この機能の呼称は (Java) Concurrency Utilities が公式で、この記事内の"Utility"というのは正確ではない＋混在していますのでご注意ください。ごめんなさい。 追記(2014-08-15): この記事は、キーワード"Java Concurrency Utilities"でGoogle検索した時に2番

フロントのWebサーバはPerl,PHP,Rubyくらいしか使えない環境で、アプリ本体はそれ以外で実装したい。 プロキシサーバも使えないので、どうしたものかと思っていたら、Webサービス方式にすれば良かったことに気づいたので、ちょっと試してみました。 データ形式はXMLでも良さそうですが、最近はやっぱりJSONが便利みたいなので、JSONでやります。 今回やること 検索結果をJSONで返せるようにする(簡易Webサービス化) PerlCGIから上のWebサービスにアクセスし、結果のJSONを元にHTMLを生成 環境 Perl 5.10.0 要JSONモジュール(無かったのでCPANインストール) Play 2.0.4 後述のサンプルの動作環境です 簡易Webサービス もちろん、これは何で作ってもかまいません。 サンプルとして、Play(scala)で作ったものを載せておきます。 元々は、s

ネットワークはJavaのコアAPIを、XMLはScalaのコアAPIを使えば、RSSフィードの処理ってちょー簡単に書けるのでは？ ふとそう思って、試しにScalaの練習も兼ねて書いてみましたが、そんなに簡単じゃないことが分かりました。難しいというわけじゃなく、落とし穴に何度か落ちたような感じです。今回はその辺についてまとめてみました。 先に書いておきますが、Scalaは悪くありません。Javaも悪くありません。たぶん。 環境 Java 1.7.0 Scala 2.10.0 要件 3年前のエントリで紹介したROMEみたいに汎用的な機能は不要で、フィードからはごく標準的な項目だけを収集できれば良いものとします。どうしても処理が複雑になってしまうところは、省略します。 今回は、フィードXMLの処理よりも、HTTPキャッシュを適切に処理して不要なダウンロードを回避するほうを重視しました。ブロードバ

比較的新しいJUnitでは、TemporaryFolder(org.junit.rules.TemporaryFolder)というRuleクラスが使用できます。 テストで使った一時ディレクトリを、テストが終わった後に自動で消すことができます。 Rulesの機能は、2009-08-04にリリースされたJUnit4.7で追加されています。 Javaで一時ディレクトリを使うには JUnitとは関係なしに、Javaで一時ディレクトリを使う場合は、システムプロパティ"java.io.tmpdir"を参照します。 この値は、Windowsなら通常は環境変数"TMP"と同じ値が設定されています。 また、File.createTempFileメソッドを使えば、この一時ディレクトリに自動で一時ファイルを作ることができます。 File tmpfile = File.createTempFile("myprod

主キーの話に関連して、UUIDについても――実際は初めてのことばかりでしたが――おさらいをしてみました。 リファレンスなど まず、基本としてRFC4122の文書があります。 それから、Javaではありませんが、以下の方のエントリが非常に分かりやすくまとめてくださっています。 UUID と Perl について - daily dayflower そして英語のページですがこちらも参考にさせていただきました。 How is an UUID / GUID made OSSのJava実装。 generate UUIDs (or GUIDs) in Java 次に、バージョンとその大雑把な意味を列挙します。 version 1 時刻ベースのUUID version 2 DCE Security 用？ version 3 名前ベース(MD5)のUUID version 4 ランダム生成のUUID ver

Play2.0のコネクションプール設定については、下記リンクに説明があります。 http://www.playframework.org/documentation/2.0.4/SettingsJDBC それぞれの設定の意味が良く分からなかったので、コメント部分を訳しつつ、機能の動作を確認してみました。 今回は、Play2.0.4(BoneCPは0.7.1)を使用しています。 Play2.0のコネクションプール設定は即ち、BoneCP(BoneCPDataSource)の設定です。 例として、デフォルトデータソースの場合は、ログに <com.jolbox.bonecp.BoneCPDataSource> JDBC URL = jdbc:h2:mem:play, Username = sa, partitions = 1, max (per partition) = 30, min (per