IgoというJavaで書かれた形態素解析器があるらしくさらにPython用のIgo-pythonというモノがあるみたいなのでGoogleAppEngineで利用してみる 導入としてはここのIgo-pythonの作者様のサイトを見て行ないましょう。 メモ: Igo-pythonの導入メモ Flaskを使いたいのでここからファイルを落としてきて適当な場所に解凍します。 GitHub - gigq/flasktodo: Example of using Flask on App Engine to make a simple todo list. このフォルダの中にIgo-pythonを解凍して作成されたフォルダと、解析用の辞書フォルダを突っ込みます。 両方のフォルダに適当な名前を付けといてください。私は「igo」と「igodic」というフォルダ名にしました。 で、application.pyを

@t2y から Python Web フレームワークアドベントカレンダー の担当がパスされてきました。 僕は Python を使い始めて 1年ぐらいになるのですが、主にコマンドラインのアプリを作っていて Web アプリには手をつけていなかったので、アドベントカレンダーに合わせて触ってみることにしました。 Web アプリの題材には、以前 Rails + Google Maps API で作った地図投稿アプリを使うことにしました。 以前 Rails 1.1 の練習題材として作ったのですが、バージョンアップの影響で いつの間にか動かなくなってしまった残念なアプリです。 フレームワークには python のマイクロフレームワークの一つである Flask を、 実行環境には Google App Engine (以下、appengine)を使うことにしました。 環境の作り方 appengine の環

A while ago I was writing some sample applications (source) for Google App Engine. I noted the things that can be useful for other GAE programmers. I used Google's webapp framework, my code here is using it. Please take a look at the shell application, it can help you test simple code. How to dynamically get application name and version?This question was asked before. You can use os.getcwd() or os

Google App Engine 専用フレームワークというふれこみの『Kay』を試してみる。 なお環境は Mac OS X 10.6、Python 2.6.2 (自前コンパイル)、GAE SDK 1.3.2。 ダウンロードと解凍 プロジェクトの Web サイトからダウンロードして解凍。 $ cd /tmp $ wget http://kay-framework.googlecode.com/files/kay-0.8.0.tar.gz $ tar xzf kay-0.8.0.tar.gz $ ls -F Kay-0.8.0 .hg_archival.txt RELEASE_NOTES kay/ .hgignore TODO manage.py .hgtags app.yaml settings.py AUTHORS cron.yaml.sample urls.py LICENSE doc

以前、Twitter OAuth 対応（Python-twoauth 版）も書きましたが、機会があったので、それの自動化版を作ってみました。 今作ってるものの部品ですけどｗ 動作環境は Google App Engine for Python、 ライブラリは Python-twoauth を使用してます。 アプリの設定 Twitter の「Application Settings」で 「Application Type」を「Browser」にして、 「Callback URL」をユーザ登録を行うページにすることを忘れないで下さい。 ここで指定した URL にユーザが「Allow」を押した後でリダイレクトされて返ってきます。 「Callback URL」の入力欄は「Application Type:Browser」を選択した時点で出ます。 でも「Callback URL」が空欄のまま登録する

GAEは、10個前でしかサブドメインが取れない制限がある為、一つのAppIDの中にパスを切ってアプリを複数詰め込むと言う使い方をしている。app.yamlに飛び先を書くだけで、サブディレクトリ以下で完全に分かれて動作するので簡単に作れるくせに、ちゃんと動く。 ただ、簡単にできてしまうためにディレクトリが乱発気味になり、なんというパスを作ったのかが分からなくなる問題があった。（管理出来てなさ過ぎる自分が悪いのだが・・）これが、普通のWebサーバだったらsshで入ってディレクトリ構造見るなりソース見ればいいのだが、Deploy先がGAEだとsshで入る事やソースをDLする事すら出来ない。ちゃんとはじめからLinkの一覧を作っておけばいいのだけど、思いついてババッと作りたい時にイチイチそんなめんどくさい事をやってられない。 GAE上で、app.yamlを読み取ってリンク一覧を作成出来ればいいのだ

最近、Google App Engine(以下GAE)で開発*1をやっているのですが、SnowLeopardにプリインストールされているPythonのバージョンは2.6で、GAEでのアプリ開発にはPython 2.5が必要なので、Python 2.5をインストールしました。 以下、やったことのログです。(走り書きですみません) Xcodeのインストール Macの統合開発環境であるXcodeをインストールします。OSのインストールメディアから。 MacPortsのインストール MacでUNIXツールを手軽に利用できるようになるパッケージ管理システムであるMacPortsをインストールします。こちらから最新版をインストール。 Python 2.5をインストール Python 2.5をインストールします。同時に使用するPythonのバージョンを手軽に切り替えてくれるツールであるpython_se

はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28

先のエントリで bit.ly API モジュールやら Stack Stock Books API モジュールを作ったので、Google App Engine 上で動作する Twitter bot を作ってみます。 先のエントリとやらはこの辺です。 bit.ly API モジュール Stack Stock Books API モジュール どんな処理にしましょうか？ ざっくりとこんな感じで。 Stack Stock Books から最新のつぶやき取得 Datastore に保存した前回のつぶやき情報と比較 新しい情報ならば、Twitter への投稿文言生成 Twitter へ投稿 Datastore に最新つぶやき情報を登録 これらの処理を一定間隔で回す ということで、URL 的にはこんな感じに。 /：紹介文でも表示しましょう /ssbbot/mumble/update/：cron がここを叩

DevFestの私のセッション 「Task QueueはMapReduceの夢を見るか？」の資料です。 Do Task Queues Dream of MapReduce? Tips and tricks about Google App Engine's Task Queue service and parallel processing with it. (by @kazunori_279) 1. What is Task Queue 2. Parallel Query Demo 3. The App Engine Parallelism 4. Concurrency Control on TQ まあ要するに「MapReduceほど大規模な並列処理にはならないけど、順次処理より数倍は速くなるよ」という趣旨です。 また、このセッションで使用する並列検索デモのコードはこちらで公開しています

Google I/O 2010で発表されたApp Engine新機能のひとつが「AppEngine-MapReduce（Mapper API）」です。このブログでもいろいろ憶測に憶測を重ねてきましたが、ついにApp EngineでMapReduceサポート！！…なんですが、しかし発表されたセッション会場もいまいち盛り上がりに欠ける感じ^^;; 理由は後述しますが、ともあれ（jw）、やっとのことApp EngineでもMapReduceがサポートされたわけです。 リンク集 appengine-mapreduce - Google Code Google I/O 2010 - Batch data processing with App Engine - YouTube Live Wave: Batch data processing with App Engine Exploring the

はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28

みなさんこんにちは。ふむふむソフトの飯島です。 さっそくですが、みなさんはTwitter APIを使ってプログラミングしていますか？　すでに星の数ほどTwitterアプリやWebサービスはありますし、バリバリ使っている方も多いと思いますが、「知っているけれど、なかなか触るチャンスがなくて……」という方もたくさんいるのではないでしょうか？ そこで今回から5回にわたって、Twitter APIを使ったWebサービスのプログラミングについて解説したいと思います。ただAPIの使い方を解説するだけでは面白くないですから、Webサービスを公開するサーバーとしてグーグルのクラウドサービス「Google App Engine（以下GAE）」を使い、自分でサーバーを用意することなく全部無料で遊んでみましょう。 本連載では、サンプルコードのダウンロードはもちろん、Twitter APIの準備からGAEの準備、