• はてなブックマーク
  • 暮らし
  • 法と技術とクローラと私 - 最速転職研究会
  • Twitterでシェア
  • Facebookでシェア

法と技術とクローラと私 - 最速転職研究会

暮らし カテゴリーの変更を依頼 記事元:mala.hatenadiary.org
適切な情報に変更
681users がブックマーク コメント 123
    共有

    • 記事へのコメント123件

    • 注目コメント
    • 新着コメント
    その他
    mktakuyax
    “なぜrobots.txtやmetaタグを無視しても良いと考えるのか robots.txtやmetaタグによるbotの拒否は、ロボット型の検索エンジンのクローラが際限なく動的に生成されるリンクを辿っていって双方のサーバーリソースに過大な負荷を

    その他
    gokyaryadp769
    酷いシステムを作って憚らない連中は、そもそもこういうエントリなんか読まずに、保身のため何でもポリス沙汰にするのが最適解、という既成事実化が問題だとおもうんだが：）

    その他
    Chisei
    『もし過剰なアクセスにより金銭的な負担が発生しているのであれば402 payment requiredを返すのも良いでしょう。youtubeが使っています。』

    その他
    janus_wel
    guide-line 例

    その他
    progd
    悪意のないわりかし一般的なbotを通報してるんじゃ、世に数多ある悪者botからアクセスされたときどうするの？って話かな / いちヘボ技術者としては、HTTPの仕様をちゃんと勉強するべきだとおもいました

    その他
    macotoi
    ルールが守られることを前提としたシステムの設計は技術的な欠陥が放置されることにつながり、結果として人々の安全やプライバシーを脅かす危険な存在であると言える。つまり、技術者の世界においては、地域や民族に

    その他
    minodisk
    岡崎市立中央図書館Webサイトクロールで逮捕の件

    その他
    gabari
    「技術者の世界においては（略）技術的に解決すべきことは技術的に解決すべきであるというのが常識や慣例であり」＜自分に対する縛りならいいけど、それを他人に強要してもなぁと思う。

    その他
    itoh_bmark
    「警察の対応が特別におかしい」

    その他
    hiro_y
    クローラーをどう実装すべきか、クローラーにどう対処すべきか。

    その他
    aereal
    「もし過剰なアクセスにより金銭的な負担が発生しているのであれば402 payment requiredを返すのも良いでしょう。youtubeが使っています。」かっこいい

    その他
    kenkitii
    「403返して終わりって事例でポリス沙汰にするな。」＜全くだ

    その他
    R2-3PO
    「警察の対応が特別におかしい」「403返して終わりって事例でポリス沙汰にするな。」

    その他
    rochefort
    ポリス沙汰にした方が悪いだろうとは、技術者の多くが思っているはずなんだが、実際には逮捕されちゃった訳で。まぁ今は、そんなことが自分には起きませんようにとブクマ。

    その他
    as365n2
    _[librahack][programming]"403返して終わりって事例でポリス沙汰にするな"

    その他
    chaiz
    高木さんの意見に近いのかなという印象。

    その他
    r-west
    酷いシステムを作って憚らない連中は、そもそもこういうエントリなんか読まずに、保身のため何でもポリス沙汰にするのが最適解、という既成事実化が問題だとおもうんだが

    その他
    wacky
    岡崎市立中央図書館サイトをクロールするbotの作者が逮捕された件について、技術者視点での考察。『クローラには問題ない』『403返して終わりって事例でポリス沙汰にするな』

    その他
    tokinaka
    もし過剰なアクセスにより金銭的な負担が発生しているのであれば402 payment requiredを返すのも良いでしょう。youtubeが使っています。

    その他
    daisukebe
    すごくわかりやすい。この技術者視点をどう落としていくか、だなあ

    その他
    keroria
    あとで読む

    その他
    takado
    「403返して終わりって事例でポリス沙汰にするな」

    その他
    kenichiice
    「警察の対応が特別におかしい」

    その他
    t_yano
    サービスが落ちた→機械アクセスなので攻撃→警察に相談→弱者保護のため逮捕20日拘留，が普通ならそれを狙って嫌いな人に操作が行くように細工する人いそうだよね / 一番悪いのはシステム担当会社だと思うよ

    その他
    hamasta
    　事件で無いとわかっているものをこそ、事件として扱いたい方々がいらっしゃるのではないのでしょうか

    その他
    june29
    "403返して終わりって事例でポリス沙汰にするな"

    その他
    y-kawaz
    ほぼ同意見。

    その他
    nekogaegaku
    読むのもまんどくせー。クローラなんか作らずに、人力で掻き集める方法を考えようぜ！

    その他
    umiyosh
    見てる:

    その他
    Untouchable
    クローラに関して何らかの社会的なコンサンセスを取る必要があるだろうな。現状じゃある日突然訴えられても文句は言えないように思える/ あまり関係ないが、うちの大学の電子ジャーナルはクローリングを禁止している

    その他

    注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

    アプリのスクリーンショット
    いまの話題をアプリでチェック！
    • バナー広告なし
    • ミュート機能あり
    • ダークモード搭載
    アプリをダウンロード

    関連記事

    法と技術とクローラと私 - 最速転職研究会

    こんにちは、趣味や業務で大手ポータルサイトのサービスで稼働しているいくつかのクローラの開発とメン...

    ブックマークしたユーザー

    すべてのユーザーの
    詳細を表示します

    同じサイトの新着

    同じサイトの新着をもっと読む

    いま人気の記事

    いま人気の記事をもっと読む

    いま人気の記事 - 暮らし

    いま人気の記事 - 暮らしをもっと読む

    新着記事 - 暮らし

    新着記事 - 暮らしをもっと読む

    同時期にブックマークされた記事

    いま人気の記事 - 企業メディア

    企業メディアをもっと読む

    はてなブックマーク

    公式Twitter

    はてなのサービス

    • App Storeからダウンロード
    • Google Playで手に入れよう
    Copyright © 2005-2025 Hatena. All Rights Reserved.