Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? わ、去年2023-08-26にこの記事書いたんだね。まる1年だね。2024年版機械学習・データ分析の必須10冊+ガチ90冊+Next5冊=105冊書きましたよ。 【データ分析の必読10冊+差をつける10冊＋100冊超】データサイエンス、データ分析、機械学習関連の本がご好評いただいてましたが古くなりごちゃごちゃしているので新たに作り直しました 本記事のめあて IT系の技術者の方がデータ分析関連の仕事をするために役立つ本を紹介する（私が学び始めた時にあれば欣喜雀躍したであろう）記事として書いております。 本記事作者の青木はバイオインフォマテ

はじめに*1 原理的には、あらゆる前提条件は特定の個人や状況および主義に結びつけられたステートメントとして相対化することが可能だが、人間の限られた脳ミソを節約するため、この「相対化」は通常特定の範囲内でしか行わない。しかし、前提条件の相対化を厳密かつ広範囲に行い、あらゆる前提条件を無効化していけば「異常者」が生まれる。 「異常者」とは前提条件を共有することができない人間のことを指す。そして「健常者」とは前提条件が共有された人間のことを指す。むろん「前提条件」は集団ごとによって異なるため、ある集団においては異常者の人間が別の集団では健常者となる、といった事態は起こりうる。「異常者」も「健常者」も、本質的に相対的な概念に過ぎない。 異常者による行動は健常者には予測不可能なものであり、認知的不協和を引き起こし、健常者のごく限られた脳ミソを食い尽くしてしまう。そのため、健常者は異常者を排除し、自分

「ツイッターで見た」計算社会科学という学問があります．社会科学にコンピュータサイエンスを導入して，これまでにない分析を行おうという学問です．最近日本でも計算社会科学会が発足するなど今盛り上がっている研究分野です． そんな計算社会科学の分野で扱われる課題の一つに，ソーシャルメディアによる社会の分断の分析があります．アメリカ大統領選や新型コロナ禍でフェイクニュースを目にする機会が多くなりましたが，フェイクニュースや偏った情報の取得は，人々を分断させ社会を混乱させると言われています． 分断を生み出す要因の一つが，エコーチェンバー現象にあると言われています．これは，ソーシャルメディアなどでは自分と似たような価値観を持つ人とつながりがちであり，自分の意見をいうと周りから「そうだそうだ」と同意を得られ，自分の意見が社会全体の意見のように見えてしまう現象をいいます．実際にはソーシャルメディアで可視化され

オックスフォード大学で日本学を専攻、ゴールドマン・サックスで日本経済の「伝説のアナリスト」として名をはせたデービッド・アトキンソン氏。 退職後も日本経済の研究を続け、日本を救う数々の提言を行ってきた彼が、ついにたどり着いた日本の生存戦略をまとめた『日本人の勝算』が刊行されて8カ月。生産性を高める具体的な方法を示した新著『国運の分岐点』(講談社+α新書)が刊行された。 【図】これが企業規模別の有給休暇取得率だ！ 日本に足りない「要因分析」とはどういうことか、生産性が低い現実を「要因分析」すると何がわかるのか。解説してもらった。 前回の記事(「中小企業の改革」を進めないと国が滅びるワケ)に対するコメントの中に、よくある誤解に基づいたものがありました。極めて重要なポイントですので、ご紹介したいと思います。 「町のラーメン屋が多すぎるといって10軒を1軒にまとめたところで中国には勝てません」 私の

自閉症スペクトラムと呼ばれているような障害は、実は障害でない。生物としての人類のバリエーション（変異）のひとつである。 自閉症スペクトラムは、本来は人類の、生息環境に対する適応の一つのあり方だというのが、本稿で紹介するニューロダイバーシテイ（脳多様性）という考え方にほかならない。 なぜ自閉症はこれほど多いのか 自閉症スペクトラムというものの実態は、（1）対人関係とりわけコミュニケーションが不得手で、（2）興味・関心の幅が著しく限られていたり、こだわりが激しいという二点を特徴とする。つまり、いわゆるオタク的傾向が顕著な発達「障害」として、一般にもよく知られるようになってきた。 この「障害」はおおよそ、遺伝的要因によって生ずると考えるのが定説となっている。発症率はどんなに少なく見積もっても1~2％。25人に1人と主張する研究者もいる。この値は、ほかのたいていの遺伝的障害に比べて極端に大きい（通

このサービスは、経済産業省からの3年間にわたる委託を受けて、さくらインターネットが提供するもの。委託期間終了後は同社が自立して運営することになっている。 Tellusでは、どんなデータが提供されるのか 衛星データに関しては、サービス開始時点で利用できるのは、日本の衛星「ASNARO-1」「ALOS（だいち）」「ALOS-2（だいち2号）」の光学データ（「衛星写真」）と、SAR（合成開口レーダー）画像が中心。SAR画像は、植生や地表の状況を把握するために使われる。例えば洪水被害地域を特定し、保険金支払いの迅速化に役立てるといった用途で使われているという。 光学データでは、ASNARO-1のデータ（地上分解能0.5m）、ALOSが搭載する光学センサー「AVNIR-2」のデータ（地上分解能10m）、Landsat-8のデータ（地上分解能15／30m）がある。地上分解能0.5mの光学画像を無償で提

昨日は特徴(Feature)、粗筋(Story)、脚本(Scenario)でちょいと言及した「Feature, Story, Scenarioがごっちゃになりかけている」プロジェクトの人達とお話しする機会があった。 よくよく見ると、FeatureとFunctionとがごっちゃになっていた。 つまり、要件分析の段階で実装のことを考えていたのである。 なぜ、そうなったのだろう？ 画面から要件分析をすると、こうなる どうやら要件分析する前の段階で「コンサルタント」の人達が、画面を使ってお客さんと「要件定義」をしていたらしい。 「この画面でこういうデータを入力すると、こんな画面に遷移します」みたいなやりとりがあったのだろう。 紙芝居感覚で交渉できるからわかりやすい。 だけど、先に画面を決めちゃうというのはいくつかの(そして時に致命的な)問題を抱えている。 実装をフィーチャとして捉える可能性。 例え

こんにちは、フロントエンド開発をリーディングしている古川 (@yosuke_furukawa)です。 昨年、こちらのブログで新人研修の特別講座の内容を紹介したところ、大反響だったので、今年も公開します。 リクルートテクノロジーズの新人研修 7月、リクルートテクノロジーズは新人の部署配属の季節を迎えました。 4月に(株)リクルートの新卒Web採用枠で入社した新人のうち、今年は20名が弊社に配属。3か月の研修期間を経て、早速現場での業務にあたってくれています。 リクルートテクノロジーズでは、配属までの3か月間「ブートキャンプ」という技術研修を実施しています。 ブートキャンプのコースは2つ。 一つは、プログラミングやWebサービスの構造の基礎を学び、その後1つのスマホサイトを企画からリリースまで行うコース。 もう一つは一定以上のプログラミングスキルと開発経験のある層向けに、より現場での技術に即し

パナマ文書については、いろいろな方面で話題になっているが、我々の情報科学の分野的にもなかなか興味深い事件である。 ただ今回の興味のポイントは、ハッキングとかではない。ポイントはデータのサイズ。「文書」と言うが、実は１１５０万ファイル、２・６テラバイトという巨大データの塊がその正体だ。 経済犯罪で検察や調査報道の記者が行うのが押収文書の分析。文書を読み込んでその中に出てくる登記上の名前や住所が実質同じなのかとか、取引相手の血縁関係といった相関図を作り金の流れを追い、本当は誰の金なのかを解き明かす。 しかし、２・６テラバイトは小さめの図書館にも匹敵する文書量。その分析はもはや人間のおよぶところではない。当然コンピューターの出番となる。 この記事は有料記事です。 残り826文字（全文1146文字）

宇宙航空研究開発機構（JAXA）のX線天文衛星「ひとみ」が通信を絶ってから1か月近くが過ぎた。当初は謎に包まれていた原因も分析が進み、およその可能性が判明してきたところだ。そこで、前回の記事（末尾リンク参照）では書ききれなかったより詳しい解説とともに、筆者が考える疑問点や問題点を述べていくこととする。 まず第一に、最初のトラブルと考えられている姿勢制御システムの問題について、改めて整理しよう。 「ひとみ」の姿勢制御システムは、2つの方法で自分の姿勢（向き）を知ることができる。慣性基準装置（IRU）とスタートラッカ（STT）だ。 IRUは、衛星を回転させたときの反動を測定する装置だ。回転いすに座った状態で目をつぶり、いすを回された感じを想像すると良いだろう。回されたときに受ける力を測定することで、自分が回り始めたことがわかる。これを精密に測定することで回転を推定するのがIRUだ。このよう

(2016/7/15、著者プロフィールを修正いたしました。) 仮に、高速道路の自動車をより速く走らせることがあなたの務めだとします。もしあなたが、ドライバー全員にただ「アクセルを思いきり踏むように」と言ったら、一体どうなるでしょうか？ 結果は明らかに、大惨事となるでしょう。それなのに、ソフトウェアの構築を速めようとする時に、多くの開発者がまさにそんな態度を取っているのです。その理由として持ち出されるのは、以下のようなことです。 「本当にアジャイルに進めたいので、デザインやドキュメントには時間をかけられない」 「これは本番環境にすぐ反映しなきゃいけないから、テストを書く時間はない」 「何もかも自動化する時間はなかったので、コードのデプロイは手作業でやる」 自動車が高速道路を高速で走るには、安全性が欠かせません。より速く走るためには、ブレーキやシートベルト、エアバッグといった、いざという時にド

[2018/07/01 追記] 過去に話題になったこともあり、このページに辿り着く方が多いようなのだが、係数導出の手法については継続的に改善を行っている。現時点では、「工数見積りの海を彷徨う・征服」というエントリに記載した「分位点回帰」を使うのがベストではと考えている。50%分位点が中央値にあたるため係数も安定しており、現在の見積りが過去のプロジェクトと比較してどのくらいの工数なのかが明確でわかりやすい。合わせて参考にしていただきたい。 工数見積りが難しいのはわかっているのだが、そうは言っても根拠は欲しい。この業界に入ってからずっと考え続けているのだが、やはり難しい。 この手の工数、工期という話題の時、役に立つのは次の資料だ。 IPA ソフトウェア開発データ白書 JUAS ソフトウェアメトリックス調査 素晴らしいことにどちらも PDF 版は無料で配布されているので、ダウンロードして見ること

“ホテル”と検索すると、ホテルの広告ばかりになるのは誰もが経験したことがあるだろう。これは、Googleがあなたの検索キーワードを分析しているからだ。ほかにもいろいろな履歴から性別や年齢、興味のあるジャンルまで“類推”して、パーソナリティーをつくりあげている。Googleをはじめウェブサービスはあなたの検索履歴などの個人情報を利用してサービスを展開している。その利便性を享受するか、それとも……。ただ何を利用しているかは知っていて損じゃない。 ■利用履歴から“あなた”を分析 Googleがあなたをどう分析しているかは、広告設定から確認することができる。以下のGoogleサイトのURLへログインし、広告設定を表示しよう。そこであなたの推定プロフィールが表示される。 広告設定 単純にこれは広告表示の最適化のためにパーソナルデータを利用しているだけで、もちろん悪用しているものではない。これをテクノ

民間人が測定した信憑性のある放射線量データをリアルタイムでGoogleマップ上に表示するサイト「RDTN.org」です。オリジナルは英語ですが、つい最近、日本語にも対応しました。サイト（日本語）のURLは下記です。 RDTN.ORG http://www.rdtn.org/jp 以下、サイト上にある説明文を転記します。 このサイトは、信憑性のあるデータ測定値をリアルタイムで表示するべく設立しました。現場からの信頼できる新規データがありましたら是非ご報告ください。新規のデータソースについては十分吟味した上でアップいたします。 原発危機が続く中、信頼できる情報源はとても重要です。当該地域における放射能レベルに関して相反する情報が交錯しているため、RDTNは不偏的な形式でデータを報告・閲覧できる手段を作ろうと考えました。 このサイトは政府・原子力保安院を代替するものではありません。状況の変化に伴