Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? 本題の前に 本題の前に、この記事について。 本題とは全く関係ないので無視してもらって構いません。 筆者の知識レベル まず、私はこれまでちゃんとプログラミングを学んだことがなく、プログラミングの「プ」の字もわからないような初心者中の初心者です。（「プログラミング？CとかjavaとかPythonとか名前は聞いたことあるよ？」ってレベル） 勉強を始める動機 無限に時間があったらちょっと勉強してみたいとは思っていましたが、今回勉強をゼロから独学で始めるのは、とある理由でPythonの習得が必要になったからです。（理由が無ければ永遠に始めなかった

２０２２年１０月２４日に、Python 3.11.0 がリリースされました。 私はこれまで Python 3.10.5 を使っていましたが、 3.10 に関しては２０２２年１０月１１日に 3.10.8 がリリースされていました。 では、「Python 3.10.5 → 3.10.8」の更新と、「Python 3.10.5 → 3.11.0」の更新では何が違うのでしょうか？方法にも違いはあるのか？ この記事では、Python 3.10.5 がインストールされているWindowsPCに、Python 3.10.8 と Python 3.11.0 をインストールする方法を、「バージョンアップ」と「アップグレード」の違いを交えながら説明します。 ざっくり結論 バージョンアップ 3.10.5 → 3.11.0 のように、3.x → 3.x+a への更新 ライブラリは引き継がれないため、ダウンロードが

今回のメルマガのテーマは 「PythonによるWebブラウザ自動操作の基本　～Seleniumを活用する」でございます。 「Web上からの情報収集自動化」と「Webブラウザの自動操作」ができるようになれば、業務自動化の幅が大きく広がります。 Pythonを学習している方、実務で活用している方の中でも、PythonでWebブラウザを自動で操作できることを知らない方が多いです。 この技術を使えば、例えばログインが必要な自社のWebシステムに自動でログインして操作を行うことができます。 Webブラウザの自動操作を行うためには、Pythonの便利なツールである「Selenium」というライブラリを使います。 当メルマガを通して、PythonによるWebブラウザの自動操作について理解し、是非業務自動化の幅を大きく広げていただければと思います！ 「Web上からの情報収集自動化」の研修、記事のリンクはコ

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article?

通常、ブラウザの操作は画面が無いと出来ません。 しかし、Seleniumを利用した自動操作はページ内要素を見ているので画面を必用としません。そういった画面の無いブラウザのことをヘッドレスブラウザと呼ぶのだそうです。 前回はラズパイでこのヘッドレスブラウザの起動テストをしました。 dreamerdream.hateblo.jp 今回はVPS上のCentOS7でヘッドレスブラウザを実行してみます。 やることは基本的に同じなのですがラズパイより少しだけ面倒です。 やることリスト Sereniumのインストール PyVirtualdisplayのインストール GoogleChromeのインストール ChromeDriverのインストール 日本語フォントのインストール Seleniumをpipからインストール sudo pip3 install selenium Xが元々インストールされていないので

Python 3.14.3 documentation Welcome! This is the official documentation for Python 3.14.3. Documentation sections: What's new in Python 3.14? Or all "What's new" documents since Python 2.0 Tutorial Start here: a tour of Python's syntax and features Library reference Standard library and builtins Language reference Syntax and language elements Python setup and usage How to install, configure, and u

2019年7月24日発売の「日経ソフトウエア」で「Pythonが5日でわかる本・基本編」という付録冊子を書きました。 登場人物の「栄井 愛」さんのキャラが、あるアニメの登場人物のクローンなんですね。 是非、中身を確認してみてください。 投稿者プロフィール 中島　省吾 有限会社メディアプラネット代表 Java、Pythonなどの言語入門の執筆、セミナー、SE向け新人研修の講師、コンサルタント、テキスト作成、通信教育、eラーニングのコンサルタントやテキスト作成をしています。

2Captchaとは 2Captcha公式ページ ロシアの会社が開発したreCAPTCHAを突破するためのプラットフォームです。 通常であれば、プログラムからreCAPTCHAにチェックをいれることは、ほぼ不可能レベルだと言われています。 では、なぜ2Captchaを使うだけで、可能なのでしょうか。 2Captchaの仕組み 2Captchaの仕組みを簡単に説明すると、reCAPTCHAのチェックボタンをネット上の『Worker』と呼ばれている人達に代わりに押してもらっているイメージです。 PythonのSeleniumで説明すると、プログラムの実行中にWorkerの誰かがリアルタイムで解錠した結果を2Captcha経由で受け取ると言ったところでしょう。 なので、2Captchaはプログラムで解錠しているように見えるけど、実際は人力…みたいなオチです。 使用方法 2Captchaを使うため

Python は 1991 年にオランダのプログラマー、グイド・ヴァンロッサムによって開発されたプログラミング言語です。シンプルで直感的な文法と可読性の高さから、初心者から上級者まで幅広く利用されています。現在では Web 開発やデータ分析に加え、 AI や機械学習などの分野でも活用されています。 Python の最大の特徴は、「書きやすさ」と「読みやすさ」です。コードが直感的でわかりやすく、少ない行数で効率的かつシンプルにプログラムを書くことができます。そのため、プログラミング初心者にとって学習しやすく、経験者にとっても生産性の高い開発を行うことが可能です。また Python には豊富なライブラリやフレームワークが揃っており、初心者でも高度なアプリケーションやシステムを容易に開発できるのが魅力です。 Python は多くの企業や研究機関で採用されており、大手 IT 企業でも活用されていま

クレジットカードの利用明細はこまめにチェックする必要があるが、専用サイトにログインして明細をダウンロードするのは面倒だ。そこで、自動でダウンロードするプログラムを作ってみよう。前回に引き続き今回は、実際に会員制のサイトにログインして、リンクをクリックしてデータをダウンロードするプログラムを作ってみよう。 会員制のWebサイトにアクセスしてデータをダウンロードするプログラムを作ろう Webブラウザを操作する方法の復習 前回、Google Chromeを自動操縦するために、SeleniumとChromeDriverをインストールした。これを利用することで、ChromeブラウザをPythonから本格的に操作できる。Chromeを実際に操作するため、セッション機能を利用した会員制のサイトや、JavaScriptが多用されている動的なサイトにもアクセスできる。まだ、インストールしていなければ、前回の

Pythonのpandas-profilingと、pixiedustの2つのライブラリを使うと、データの集計・グラフの作成が、感動的なほど早く終わることを実感したので共有します。 Excelでデータ集計・グラフ作成した場合と比較すると、体感で100倍くらい早く終わります（誇張ではなく） Pythonで爆速でデータ集計する方法（体感所要時間：5分） 前提： 以下の環境が整備されていることは、前提とします。 Pythonのインストール（約30分） データ分析に必要な各種ライブラリのインストール（約30分） →numpy, matplotlib, pandas, jupyter など →Anacondaをインストールすれば、Pythonと各種ライブラリは同時にインストールされます。 また、集計対象である、テーブル形式のcsvデータは既に用意されているものとします。 ↓Excelで表示すると、こん

1. 本Part概要 前PartではB'zの歌詞を「TF-IDF」を用いた分析を行いました。 本Partではトピックモデルの一つである「LDA」を用いた分析についてお話しします。 pira-nino.hatenablog.com 2. LDAとは 2.1 LDAのイメージ 先に簡単な説明をしてしまいます。 LDAは「たくさんの文書データから単語のグルーピングを行う」モデルです。 このグループ1つ1つを「トピック」と呼びます。 例えば、大量のニュース記事にLDAを適用する例を考えます。 ニュース記事データにLDAを適用した例 LDAでは「各トピック（トピック数は予め指定）における各単語の所属確率」が算出されます。 理論的なことはさておき、文書データから単語をいくつかのグループに自動で分けてくれる手法 との理解で大丈夫です。 よく勘違いされることとして以下の2点を示します。 トピック数（いくつ

自分で小さいツールを作る時に心に留めているtipsです． 書き始めたときは「どうせ書捨てだし」と思って書き始めると意外と長い間，もしくはいろんなところで使うことになったりするので，気をつけておくと後から楽になるというような小技です．大規模なソフトウェアの開発ではまた違った流儀があると思います． メインルーチンを関数にする 関数名はなんでもいいのですが，自分は趣味で main() という名前の関数を用意し，メインルーチンは全てそこに書くようにしています． pythonの小さなサンプルコードを見たりすると関数外の部分にベタで実行コードが書かれていたりします．もちろんそれでも動くのですが，以下の2点で後々面倒になることがあります． グローバル変数だらけになり管理が追いつかなくなる：「どうせ小さなスクリプトだし」ではじめると最初は見通しが良くてもだんだんどこでどの変数名を使っているか分からなくなっ

8月10日に「いちばんやさしいPythonの教本」が出版されました。 書籍は、ビープラウドのメンバー、鈴木たかのり（@takanory）、杉谷弥月の２人で執筆しました。 レビューには、私も含めて以下のメンバーが参加しています。 社内レビュアー @shimizukawa @hirokiky @okusama27 @haru860 ヘルプコラミスト @hirokiky 読者対象者 以下の方々が対象です。 プログラミングを始めたい Pythonを学びたい 内容構成 書籍は10章構成です。 内容は、以下のように大きく５つに分かれています。 【1】プログラミング入門 プログラミングを始める方向けの内容です。プログラミングとは何か、どのように動作しているのかをPythonを使って丁寧に説明しています。 1章 Pythonを学ぶ準備をしよう 2章 コマンドプロンプトに慣れよう 3章 基礎を学びながらプロ

7月20日、Intel (Movidius) がUSB接続タイプのスティック型ディープニューラルネットワーク処理用アクセラレータ「Movidius Neural Compute Stick」を発表しました。 Intelが激安1万円以下のUSB型Deep Learning用端末「Movidius Neural Compute Stick」を発売 : Gigazine Intel Democratizes Deep Learning Application Development with Launch of Movidius Neural Compute Stick | Intel Newsroom プロダクトページ NCSは、Deep Learningに特化した専用チップ「Myriad 2」が搭載された、外付けの演算装置です。USBポートに挿すだけでDeep Learningの推論処理を実