のっちフライデーのショックで一気に書き上げました（嘘）。Google App Engine（以下GAEと略）を用いて℃-uteのなっきぃをTwitterに召喚しました。なかさきBotです。 http://twitter.com/_nksk 今回はなかさきBotをどう作ったのかまとめて、チュートリアル的なものを書いてみました。かなり適当に作ってるので、ここ違うよ！とか、こう書けばいいんじゃない？みたいなコメント大歓迎です。GAEの入門編は以下のリンクを読んでください。ほとんどそこと同じことを書いてます。 http://code.google.com/intl/ja/appengine/docs/python/gettingstarted/ 開発環境はWindows XPで、言語はPythonで書いてます。初Pythonでしたけど難しくなかったですよ。準備として、まずPythonのダウンロード

初めて、Twitter botなるものを作ってみた。 http://twitter.com/zenra_bot 公式ページ：http://zen-ra.appspot.com/ フォローするとフォローし返します フォローを外されると同様にフォローを外します フォロワーの発言を拾って、勝手に全裸に書き換えます 例：「@sugyan が全裸で言った: ********」 非公開の発言は拾わないようにしています。 たまに独り言もつぶやきます 実装 Google App Engine(Python)で作りました。 ソースコードはGitHubにて公開しています。 GitHub - sugyan/Zenra: 全裸にする 基本的にcronでフォロワーのチェック&更新、つぶやきを行っているだけ。 特に外部のライブラリを使わずにGAEのurlfetch APIでTwitter APIを直接叩いたり。 一番

Portable PythonはWindows向けのオープンソース・ソフトウェア。Pythonはアメリカでのシェアが高いプログラミング言語だ。だがなぜか日本ではいまいちシェアが低い。とはいえGoogle App Engineのような環境やDjangoのようなフレームワークも登場し、開発をプッシュする環境が整いつつある。 専用のプログラミング環境付き では実際にPython開発をはじめようと思ったら、何から準備すれば良いだろうか。もちろんまずはプログラミング実行環境のインストールだ。Windowsユーザの方はPortable Pythonを使えば一番早い。ポータブルで使えるPython環境が手に入るのだ。 Portable Pythonはインストーラーとして提供されるソフトウェアで、USBメモリなどにインストールする。もちろんHDDへのインストールも可能だ。Python2.5、2.6、3.0

ScrapyはPython製のオープンソース・ソフトウェア。Webサービスから必要な情報を抜き出したり、自動操作をしたりと未だに利用されているのがスクレイピングと呼ばれる技術だ。求人、不動産、Eコマース…様々なサイトの情報を機械的に収集し、データベースに蓄積している。 Pythonで外部サイトからデータを収集する際に RubyでWebシステムを開発している場合、HpricotやNokogiriを使っていたが、Pythonによる開発の場合はどうしたら良いだろう。そこで使えるのがScrapyだ。ScrapyはPythonで開発されたスクレイピングとクローリング用フレームワークだ。 ScrapyではWebサイトにアクセスしてデータを取得し、そのデータからXPathを使ってコンテンツにアクセスできる。オブジェクト指向に従って、柔軟に操作ができるのが便利だ。スクレイピングしたデータを使ってWebサイ

かつて無いほど、pythonのバージョンが混沌としている。 今までは、バージョンが上がっても何となくどっちでもイイカンジでそれなりに苦労なくバージョンが上がってた。そもそも、そんなに頻度が高くバージョンアップしてきたのでバージョン3つ以上有るという状況になりにくかった。 現在、手元の環境に入ってるPythonのバージョンは 2.5.1（OSX付属) 2.5.2（port出入れたやつ） 2.6 (dmgで入れたやつ） 3.0 (dmgで入れたやつ） と、既に4つ入ってる。こんなの初めてな感じ。2.6移行のマルチプロセス大好きっ子になってしまったので、出来る限り2.6（3.0は動かないモジュール有ってまだ移行し切れてない）で開発して行きたいが、どうしても2.5じゃないと動かないモジュールもあるので未だに、これらの中から一本に絞るという事が出来ない。 今までは、それぞれのバージョン番号を付けて起

pysmell - Google Code PySmellはVimやEmacs, TextMateでPythonスクリプトを書く際に補完機能を提供してくれる．ほとんどのIDEは関数等の補完機能を有しているが，TextMateにはこの機能がなかった．スニペットは強力だが，補完機能使いたさにIDEに環境を移行せざるを得ないというのは悩みどころ．しかし，PySmellによってTextMateに補完機能が付与されることでIDEに優るとも劣らない開発環境となったのではないだろうか……と素人な俺が言ってみる．短かいスクリプトしか書いたことがないのでIDEほどのごつい環境(多機能性)の恩恵を受ける必要性を感じずIDEを使わないので，軽量エディタ指向というのはあるかもしれない． インストール〜設定 Macにインストールする際には easy_install を用いて， sudo easy_install p

HTTPリクエストでPOSTを使う方法 import urllib import urllib2 post_data = {} post_data['email'] = '[email protected]' # エンコード en_post_data = urllib.urlencode(post_data) # リクエスト r = urllib2.urlopen('http://hoge.com/',en_post_data) # urllib.urlopenも同じ # build_openerも同様 opener = urllib2.build_opener() r = opener.open('http://hoge.com/',en_post_data) ようするに、urlopen()ã‚„open()の第２パラメタにデータを渡せばPOSTしてくれる。 プロクシ経由でHTTPリクエストを行う方

Getリクエスト >>> import urllib2 >>> r = urllib2.urlopen("http://www.yahoo.co.jp") Postリクエスト >>> import urllib >>> query = {"name":name, "password":password} # 送信するデータ >>> query = urllib.urlencode(query ) # URLエンコード >>> r = urllib2.urlopen("http://www.hatena.ne.jp/login", query) レスポンスオブジェクトのメソッド >>> r = urllib2.urlopen("http://d.hatena.ne.jp/yumimue/edit") >>> r.code, r.msg # レスポンスコードとメッセージ (200, 'OK')

メニーコア時代を見据えて、Pythonで並列プログラミングできるか、少し確かめたくなりました。 いくつか試行錯誤したのですが、結果から言うと、Parallel Pythonというのを使えば割とらくに並列プログラミングできることもあるかもしれない、という感じでした。 お題として使ったプログラムは、指定した拡張子を持つファイルから、指定した文字列を探すというものです。 まず、並列化していないもの。 import sys import os import os.path import time if __name__ == '__main__': if len(sys.argv) == 1: print "hoge pat exts..." sys.exit(0) pat = sys.argv[1] exts = sys.argv[2:] t0 = time.time() for root, d

2006.10.15 Python Mechanize を使ってみる (1) カテゴリ：その他 mechanize (Web ブラウジングをプログラムするための Python のモジュール) を使ってみることにした。mechanize は、Andy Lester さんの WWW::Mechanize (Perl 版) を参考に Python で実装したものようだ。WWW::Mechanize の日本語情報を眺めてみる。このページにあるものや、サンプルスクリプトが参考になりそうだ。file upload script for sourcefourge.jp のように Mecab の sourceforge.jp へのアップロードにも使われているようだ。これも参考になるスクリプト。 urllib を使えばページをとってきたりするのは楽にできるのだが、その後、とってきたページを解析して、そこから

ITpro 連載「基礎からはじめるPython」の第3回「スクレイピングにチャレンジ！」にチャレンジ してみた。 手順 Beautiful Soup をインストール 動作確認 1. Beautiful Soup をインストール BeautifulSoupは，ファイル1個のライブラリなので，site-packagesに配置すればインストールは完了です。 第3回 スクレイピングにチャレンジ！ | 日経 xTECH（クロステック） とゆーことで、Beautiful Soup 公式サイト から BeautifulSoup.py をダウンロードし、site-packages（/Library/Frameworks/Python.framework/Versions/2.5/lib/python2.5/site-packages）へコピー。 iPythonを起動してimport BeautifulSo