こんにちは、@yoheiMuneです。 正規表現で文字列を扱う際に、改行が含まれる場合は少し考慮が必要です。今日はその対応方法をブログに書きたいと思います。 Pythonの正規表現について Pythonの正規表現の使い方は、「[Python] 正規表現まとめ」をご参照ください。 何がしたいのか 例えば、以下のようなHTMLがあり、そこからaタグを抜き出したいとします。 <div> <a href="https://www.yoheim.net"> ブログへのリンク </a> </div> 見ての通り、HTML全体、そしてaタグにも改行が含まれており、改行を考慮して正規表現にマッチさせる必要があります。 下記のように正規表現を書くと、改行を含む箇所が正しくヒットしません。 import re # html html = """ <div> <a href="https://www.yohei

LangChainとは ChatGPTなどの大規模言語モデルの機能拡張を効率的に実装するためのライブラリです。 LangChainの６つの機能 Model I/O:OpenAIをはじめとした様々な言語モデル・チャットモデル・エンべディングモデルを切り替えたり、組み合わせたりすることができる機能 Retrieval:言語モデルが学習していない事柄に関して、外部データを用いて、回答を生成するための機能 Chains:複数のプロンプトに分けて、順番に実行することで、より精度の高い回答が得られます。 Memory:ChainsやAgentsの内部における状態保持をする機能 Agents:言語モデルに渡されたツールを用いて、モデル自体が、次にどのようなアクションを取るかを決定・実行・観測・完了するまで繰り返す機能 Callbacks:大規模言語モデルのアプリケーションのロギング、モニタリング、非同期

randomモジュールの使い方 randomモジュールの応用的な使い方</li randomモジュールで文字列を生成する方法 などといった基本的な内容から、より実践的な内容に関してもやさしく解説していきたいと思います。 ※ この記事のコードはPython 3.7で動作確認しました。 本記事を読む前に、Pythonがどんなプログラミング言語なのかをおさらいしておきたい人は次の記事を参考にしてください。 → Pythonとは？特徴やできること、活用例をわかりやすく簡単に解説 なお、その他のPythonの記事についてはこちらにまとめています。 randomモジュールとは randomモジュールは、Pythonでランダムな処理が必要な場合に活躍する標準モジュールです。ランダムな要素や乱数を使う操作などはとても便利なので、覚えておいて損はありません。ちなみに乱数とは、サイコロを投げたときのようにどの

実際には、開発者のGuido van Rossum（グイド・ヴァンロッサム）氏が英国BBCのコメディー番組「空飛ぶモンティ・パイソン（Monty Python's Flying Circus）」のファンだったことから「Python」と名付けられました。ちなみにMonty Pythonは、英国を代表するコメディーグループの名前です。 C（シー）言語 他の言語を開発するためのプログラミング言語「BCPL (Basic Combined Programming Language、Basic-CPL)」で開発された「B言語」が前身であったことから、その次という意味で「C」と名付けられました。 また「C++」は、C言語を拡張したことを意味するインクリメント演算子「++」を付けたもの、「Objective-C」はC言語をベースにオブジェクト指向を取り入れた言語ということで名付けられています。 Java

他ファイルの関数をimportで呼び出す Pythonで別のファイルの関数を実行するにはimportキーワードを使用します。 importキーワードは以下に使用できます。 標準モジュール（標準ライブラリ）：Python と同時にインストールされるモジュール。インターネット処理を扱う http や、数学関数の math など、多くの種類があります。 拡張モジュール（拡張ライブラリ）：必要に応じてインストールして利用するモジュール。数値計算や行列を扱う NumPy、グラフ描画の matplotlib など、用途に応じて多くの種類があります。 自作のPythonファイル：ユーザーが自分で作成した関数。共通的な関数を別のファイルに保存しておいて、ライブラリと同じように読み込んで利用することができます。拡張子はpyとします。 例えば、同じフォルダのcircle.pyというファイルの中にある関数をim

起動時オプションとは？ Seleniumの起動時オプションとは、ブラウザを起動する際に追加で設定できるオプションのことです。たとえば、「Seleniumをバックグラウンドで起動する」「シークレットモードで起動する」などが実現可能です。 テスト時の細かな設定ができたり、オプションなしではエラーになるスクレイピングが可能になったりと、Seleniumを扱うなら知っておいて損はありません。 基本となるコード※これをコピペして使ってください こちらに、ベースとなるソースコードを載せます。本記事で紹介する内容は、ここに追加していくことでコピペで動かすことが可能です。 オプションを追加する際は、「# ▼以下にオプション設定を追加します」の下に追加してください。オプションを使わず実行する場合は追加した行をコメントアウトすればOKです。 from selenium import webdriver fro

こんにちは。Heavy metal is very very healthyです。ナビタイムジャパンでAIやコンピュータビジョンを用いた研究開発を担当しています。 この記事では、PythonとOpenCVでコンピュータビジョンを使った画像から信号機の色を認識する手法を紹介したいと思います。画像認識には興味あるけど、難しそう、どうやってやるのかわからない、なにから手をつけていいのかわからない。そんな印象を持つ方も多いんじゃないでしょうか？ ご安心ください。今回紹介する手法は難しい数式や複雑なロジック、AIなどでよくある大量の学習データやGPU学習環境など、面倒な準備は必要ありません。PythonがインストールされたPCがあれば、この記事を読みながらこの手法を一緒に体験できますので、是非トライしてみてください。 また、この手法はナビタイムジャパンのアプリ「AiRCAM」(エアカム) に搭載した

ウィンドウとタブウィンドウハンドルの取得WebDriverは、ウィンドウとタブを区別しません。 サイトが新しいタブまたはウィンドウを開く場合、Seleniumはウィンドウハンドルを使って連動します。 各ウィンドウには一意の識別子があり、これは単一のセッションで持続します。 次のコードを使用して、現在のウィンドウのウィンドウハンドルを取得できます。 Java Python CSharp Ruby JavaScript Kotlin // Navigate to Url driver.get("https://www.selenium.dev/selenium/web/window_switching_tests/page_with_frame.html"); //fetch handle of this String currHandle=driver.getWindowHandle();

Pythonで、文字列同士を比較して完全一致や部分一致、前方一致、後方一致などを判定する方法について説明する。

Pythonで文字列を検索して特定の文字列を含むか判定したりその位置を取得したりするにはin演算子やfind()メソッドを使う。標準ライブラリのreモジュールを使うと正規表現でより柔軟な処理が可能。 文字列中に含まれる特定の文字・文字列の出現回数（個数）をカウントする方法は以下の記事を参照。 関連記事: Pythonで文字・文字列の出現回数をカウント 文字列の抽出・置換・比較については以下の記事を参照。 関連記事: Pythonで文字列を抽出（位置・文字数、正規表現） 関連記事: Pythonで文字列を置換（replace, translate, re.sub, re.subn） 関連記事: Pythonで文字列を比較（完全一致、部分一致、大小関係など） テキストファイルの中身を検索したい場合は、ファイルを文字列として読み込めばよい。 関連記事: Pythonでファイルの読み込み、書き込み

Python で日時を扱う場合、標準ライブラリの datetime を利用することがほとんどだと思います。 一方で datetime はそのまま使うとタイムゾーンを考慮しないため、ローカル端末は JST で、サーバに置いた時に UTC で想定と違う結果になるようなことがあります。 なので datetime を扱う時はタイムゾーンを扱うように実装しましょう。 またシステム的に datetime を扱って、外部とのやり取りでは文字列で扱うことも多いので datetime <-> str の情報も整理する。 まとめ timezone 付きで現在日時を取得する（UTC） >>> from datetime import datetime, timezone >>> now = datetime.now(timezone.utc) >>> now datetime.datetime(2022, 4,

pythonでスクレイピングをすることがあるのですが、 ある日突然、対象のホームページのデザイン等が変わってしまい テキストボックス内の文字が、Clearで消えないという現象が発生しました。 対処方法があるのでメモとして残しておきます。 まずはClearでテキストボックスの文字を消す方法 テキストボックスに入っている文字を消す時に、これが一般的に使われる方法です。 私もこちらを使用していました。 一行で済むので、こちらが使える場合は使いましょう。 driver.find_element_by_id( 'hoge' ).clear 大体の場合はこれで削除することができます。 Clearが効かない場合の対処法 １つ目の方法をまず試してみてください。 ほとんどの場合でこちらが対処法として使えると思います。 【おすすめ】sendKeysで全選択削除する対処法 Clearが使えない場合、sendKe

正規表現にマッチした文字列を新しい文字列に置換する(Pattern.sub, Pattern.subn) Pattern クラスの sub メソッドは、対象の文字列の中で正規表現パターンにマッチした文字列を新しい文字列に置換します。 sub メソッドは置換後の新しい文字列を返しますが、 subn メソッドはタプルとして返します。ここでは Python の正規表現で sub メソッドおよび subn メソッドを使って正規表現にマッチした文字列を新しい文字列に置換する方法について解説します。

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article?

はじめに Seleniumを使ってブラウザを操作する方法を解説します。 これを使うことで実際にブラウザを操作してのテストをするときに同じような操作を繰り返し手作業しなくても良くなったりして作業の効率化ができると思います。 準備 今回はpython3.10を用いて操作を行っていきます。 まずはSeleniumをインストールする必要があります。 下記のコマンドを実行してseleniumをインストールしましょう。 また今回はGoogleChromeを操作していきますのでChromeDriverというソフトをインストールする必要があります。 https://chromedriver.chromium.org/downloads こちらのサイトからお使いのGoogleChromeのバージョンに合ったChromeDriverをインストールしてください。 また、Edgeなど他のブラウザを操作したい場合は

ファイル作成に関する留意点 ファイルの拡張子 「py」ではなく「cgi」にする必要があります(※1)。 ※1：実は、拡張子をpyのままでcgiとして動作させる方法もあり、 これにについては、後述の「.htaccessの要否」をご参照ください。 文字コードと改行記号 文字コードを「UTF-8」にして、 改行記号を「LF」にすると良いです。 他の組み合わせだとエラーになることがあるそうです。 pythonへのコマンドパス 上記の「Hello.cgi」の１行目に記載されているpythonへのコマンドパス。 最新の情報は、さくらのサポートページ＞「レンタルサーバサービス仕様」＞「CGI・PHP・SSI について」のページで「プログラムのコマンドパス」という項目があるのでここで確認してください → さくらのサポートページ レンタルサーバへのアップ アップ先 作成したファイル「Hello.cgi」のア

さくらのレンタルサーバでPython使いたいんだけど使えるの？ Python使えますよ！ この記事ではさくらのレンタルサーバでPythonを使う方法を書いていきます。 この記事で分かること さくらのレンタルサーバに入っているPythonを使う方法 新たにPythonをインストールして使う方法 さくらのレンタルサーバでPythonを使いたい方は参考にしてみて下さい。 さくらのレンタルサーバでPythonを使っていきましょう。 さくらのレンタルサーバにPythonは入っている さくらのレンタルサーバ にPythonは入っています。プログラムのコマンドパスを見てみるとこんな感じですね。 perl /usr/bin/perl ruby /usr/local/bin/ruby php /usr/local/bin/php Python /usr/local/bin/python sh /bin/sh