データベースサーバのパフォーマンスチューニングをしている時に、LinuxのOSのディスクキャッシュが効いてしまって、うまく結果が出ないことがあります。サーバを再起動する方法もありますが、ディスクキャッシュをクリアしてしまえば再起動の手間も省けます。 以下のコマンドでLinuxのOSのディスクキャッシュをクリアすることができます。この方法は、Kernel2.6.16以降で利用することができます。 sync echo 3 > /proc/sys/vm/drop_caches サーバの再起動をするよりもすごく手軽にキャッシュを削除することができるので、チューニング中は役に立つと思います。しかし、本番サーバで実行すると、パフォーマンス低下など何が起こるかわからないので、気をつけてください。ステージング環境での実行をおすすめします。 では。

Rclone syncs your files to cloud storage: Google Drive, S3, Swift, Dropbox, Google Cloud Storage, Azure, Box and many mo... 以下に使うまでの手順を紹介します。 ■インストール rclone.orgから【Linux Arm】のバイナリをダウンロードしました。zipファイルを展開して、rcloneコマンドを実行すれば、そのまま起動します。 ■準備　設定を行う まずは、以下のコマンドを実行して、設定ファイルを作成します。 $ rclone config コマンドを実行すると、対話形式で設定を聞かれます。今回はGoogleDriveを設定しました。 No remotes found - make a new one n) New remote s) Set configura

Linuxでサーバを運用していると、メモリ不足でSwapが発生することがあります。で、このSwapなのですが、発生頻度を少しだけ調整できます。デフォルト設定だと、物理メモリに余裕があってもSwapが発生します。これを調整すると、少しだけSwapの発生を抑えることができます。 設定しておくと幸せになると思います。 ■パラメータ 下記のファイルに０〜１００の数値が記載されています。 /proc/sys/vm/swappiness この数値を０にすると、物理メモリを使い切るまでSwapを発生させません。１００にすると、とにかくSwapするようになります。パフォーマンス激落ちです。デフォルトは６０です。この数値を０にしてしまえば、数値を1以上に設定すれば、メモリを最大まで使い切るようになります。 追記 2016/3/25 はてなブックマークのコメントで、swappinessを0にするとOOMKil

このコピペチェックツールは、分散環境を構築してサービス運営しています。cakephp2.6で実装されており、以下のようなネットワーク構成になっています。VPSはGMOが提供しているConohaを使っています。 APIを実装して、curl_multiで並列アクセスして、高速化を狙っています。 ここでは、このmod_proxy_balancerの動かし出すまでサンプルを公開します。以下の設定をapacheの設定に記述しています。それぞれ、内容を解説していきたいと思います。 ※2016-04-26 SetEnv proxy-initial-not-pooled 1を追加しました。理由はこちらです。 ProxyRequests Off ProxyPass /balancer-manager ! <Location /balancer-manager> SetHandler balancer-man

LinuxサーバにSSH接続するときに、パスワードなしの鍵交換方式でログインするように設定する手順です。 この方式にすると、パスワードなしで鍵ファイルを持っている人だけがサーバにログインできるようになりセキュリティが向上します。こちらの記事で、パスワードでのログインを禁止する方法を紹介しています。 また、SCPでバックアップ取るときなどにも、利用することができます。 AWSのEC2なんかもこの方法を使ってログインするようになっています。今回はこの設定手順を紹介いたします。 ■接続元端末での作業 まずは以下の作業を接続元の端末で作業をします。 ▼ssh-keygenで鍵の作成して、ファイルの内容をコピーする 対象ユーザでログインしてから以下のコマンドを実行し、鍵ファイルを作成します。この鍵ファイルはパスワードなしの鍵ファイルとなります。 ssh-keygen -t rsa 色々と設定を聞かれ

この記事でmysqlサーバの最低限の設定を書きました。 my.cnfのinnodb_log_file_sizeの値を変更したあと、そのままmysqlを再起動すると起動しなくなったり、起動してもselectやupdateができなくなります。以下の手順を踏むことで正常にもどります。一旦mysqlサーバを停止しないといけないので、場合によっては少し面倒くさい感じになるかもしれません。 ■mysqlサーバの停止 まずは、mysqlサーバを停止します。 /etc/init.d/mysqld stop ■ログファイルの削除 以下の2つのファイルを削除、または移動します。ファイルの場所は、yumでインストールした時は以下の位置にあります。都度読み替えてください。 rm /var/lib/mysql/ib_logfile0 rm /var/lib/mysql/ib_logfile1 ■mysql再起動 m

SSHにログインした時のメッセージを変更する方法を紹介します。簡単にできるので、ぜひやってみてください。 sudo vi /etc/motd これで、ログイン時のメッセージを変更することができます。

プログラム上でdigコマンドを使って、情報を取得するという実装をした時に発生した現象です。とにかくネットワークの速度が遅く、使い物になりませんでした。OSはCentOS6.5でした。 ■digコマンドが遅い 症状としてとにかく、digコマンドの完了がおそい！30秒くらいかかっていたのです。普通にローカル上だと2秒くらい出終わっていたので、10倍時間がかかっていました。 ■原因 どうやら、ipv6のIPアドレスの指定が問題だったようです。 CentOS6辺りからIPv6がデフォルトで設定されうようになっているようです。そのVPSでは、ネットワークがIPv6に対応していませんでした。そのため、IPv6がサーバで有効になっていることで、問題が発生していました。 以下の様な動きになっていました。 ・IPv6でまず検索 ・IPv6タイムアウトまで待つ ・ipv4で次に検索 というわけでIPv6を無効

AWSのm3.mediumか何かを使ってサービスを運用していた時、とにかくCPU利用率の【st】の項目が50%近くになっていて、速度が出ない時期がありました。で、このstの項目の意味を調べてみました。 ■stの数値が上がる時はどういう時 調べてみると、以下の様なパターンがあるようですね。仮想化されているサーバで意味を持ってくる数値とのこと。 ▼仮想化されているサーバがCPUの要求しているのに、他の仮想化されているサーバが物理リソース食いつぶして待たされている ▼CPU利用率のしきい値がホスト側で設定されていて、指定された利用率以上にCPUを利用できない状態になっている 今回は、AWSのm3.mediumインスタンスということで、仮想CPUが１個に制限されていました。そのため、たくさん並列でプログラムを動かそうとして、stの値が上がっていた。という結論になりました。 対応としては、c3.la

■AWS EC2にはスワップ領域が存在しない AWSのEC2ですが、一定のインスタンス以上にならないとスワップ領域が存在しません。なので、メモリが不足＝即OOMKillerの餌食になります。そもそも、メモリが足りなくなってスワップが一定以上発生してしまったら、パフォーマンスがガタ落ちするのでなくてもよい、と判断することもできます。 ですが、ちょっとメモリが足らなくなったくらいでサーバが落ちても困るので、スワップ領域を設定しておくと少し安心かと思います。また、スワップが発生すると当然ディスクI/Oが発生します。I/O回数やIOPSによって料金が発生する可能性があるので、気をつけましょう。 ■概要 通常は、スワップ領域専用のパーティションなどを用意して実行するのが普通ですが、今回はファイルを利用します。 ファイルを作成し、そのファイルをスワップ領域として利用する方法です。メリットとしては、EB

CentOSでSELinuxを無効にする方法です。無効にするにはサーバの再起動が必要となります。SELinuxはきちんと設定するとセキュリティ的に良いようなのですが、設定が大変な上に普通にセキュリティのことを考慮したサーバであれば特にいらないような気がします。 ■SELinuxがOnになっていると影響が出てくること 一例として、ApacheのDocumentRootのディレクトリからシンボリックリンクで他の場所へリンクされているリソースに対してアクセスできなくなります。 ■現状の設定状態を確認する方法 以下のコマンドで確認することができます。 getenforce Enforcingとか、permissiveとかになっていればSELinuxが有効になっています。disabledになっていれば、無効になっています。 ■無効にする方法（恒久的） 以下のファイルを変更します。 /etc/sysc

AWSのEC2インスタンスをAmazonLinuxで新規に作成、起動した時にやったほうが良いことを5つまとめました。 EC2ではない普通のVPSなどのサーバでもやっておいたほうが良いことも少し混ざっています。ぜひ、確認してみてください。 １．yum updateしておく これはAWSでなくても、サーバ構築直後にやっておいたほうが良いと思います。再起動が推奨される更新（カーネルとかglibcとか）がある場合も構築直後なら再起動しやすいと思います。 ２．タイムゾーンをJST(日本）に変更する Amazon Linuxで起動した直後は、タイムゾーンがUTCになっていて、時刻が9時間ずれています。起動したら、まずはJSTに変更しましょう。以下のコマンドでインストールできます。上書きされるか確認されるので、上書きしてください。 cp /usr/share/zoneinfo/Japan /etc/lo

apacheにSSLを設定するときは中間証明書のディレクティブが用意されているのですが、nginxには、中間証明書を直接指定するディレクティブが用意されていません。 ■対応方法 ではどうするかといえば 【サーバ証明書と中間証明書を結合したファイル】を作成して、その結合した証明書のファイルを「ssl_certificate」で指定することで対応することができます。 ■ファイル結合コマンド例 # cat cert.cer tyukan_cert.cer > cert.pem このようにすることで、cert.pemが結合されたファイルになります。 結合した証明書ファイルの内容は以下のようになります。もちろんコマンドを利用しないで、直接エディタでコピペして以下の様なファイルになるようにしても問題ありません。 -----BEGIN CERTIFICATE----- [サーバ証明書] -----END

■Linuxでハードディスクの簡易ベンチマークの手順 この記事では、以下2つの簡易ベンチマークの手法を紹介します。 hdparamコマンドによる読み込み速度の簡易ベンチマーク ddコマンドによる書き込み速度の簡易ベンチマーク どちらのコマンドもほぼデフォルトでLinuxサーバに入っているコマンドです。お手軽に簡易的なハードディスクなど記憶装置のベンチマークができます。サービスが稼働しているサーバで行うと、サービスのパフォーマンスに影響が出ると思うので、気をつけてください。 ■hdparmコマンドによる読み込みベンチマーク hdparm はLinuxでハードディスクのパラメータ調整を行うプログラムです。DMAのON/OFFなどをしてくれます。最近は自動設定が賢いのであんまり使わない印象です。 で、このhdparmはオプションを設定することで、ハードディスクのデータ読み込みに関するベンチマーク

既に有名な話ですが、CentOS 7およびRed Hat Enterprise Linux 7からはifconfigコマンドやnetstatコマンドが非推奨となり、デフォルトインストールすらされなくなりました。代替として、ifconfigコマンドはipコマンド、netstatコマンドはssコマンドが用意されています。 というわけでさっそくssコマンドを試していたのですが、明らかに動きがおかしなところがあり、少し調べてみました。 そして、「netstatコマンドの代替と思って安易にssコマンドを使うと、これは痛い目に遭うな……」ということが分かったので、不幸になる人を少なくするためにこのエントリを書きました。 概要 結論から先に言うと、CentOS 7/ RHEL 7のssコマンドには「UDPの開放ポートがTCPと報告される」というひどいバグがあり、使うべきではありません。 また、ssコマン

少人数でサービス開発をしていると、サーバーのアカウント管理を疎かにしてしまいがちです。良くないことだとわかっていながらも、共用ユーザーのログイン情報を数人で共有していたりだとか、rootばかり使っているなんてこともあるのではないでしょうか。 それだとオペレーターが増えたり、退職者がでたりした時に困ることになるので、最初からルールと仕組みを決めておいた方がトータルで楽になります。 前提 パスワードやログイン鍵の共用、ダメ！絶対！ rootを常用するの(・A・)ｲｸﾅｲ!! パスワードやログイン鍵を共用していると、人数が増えた時に誰が作業しているのか把握するのが大変になりますし、退職者が出た時に一斉変更をせざるを得なくなって混乱してしまいます。逆に一部のスタッフを別扱いして権限を制限したユーザーをアドホックに作ったりしてしまうのも管理が煩雑になります。じゃあどうすればよいかというと、個人ごとに

前回は CentOS 6.5 サーバ上のサーバ監視ツール munin でハードディスク温度監視の設定を行いました。 今回はサーバ監視ツール munin で CPU 温度・電圧・ファン回転数監視の設定を行います。 0. 前提条件 CentOS 6.5(x86_64) を Minimal で最小インストールしている。 クライントマシンは Linux Mint 14(64bit) を想定。 閲覧に使用する Web(HTTP) サーバは Nginx を想定。 1. lm_sensors インストール ハードウェア状況を取得するのに必要な lm_sensors をインストールして、ハードウェアを検出する。

最近注目されている開発支援ツール「Vagrant」は、テスト用の仮想マシン作成やその環境設定などを自動化するツールだ。これを利用することで、仮想環境の作成からセットアップ、そして破棄までを、簡単なコマンドを実行するだけで行える。今回はこのVagrantの概要と基本的な使い方を紹介する。 仮想マシンの作成や環境構築、仮想マシンの破棄までを自動化するツール「Vagrant」 近年、Web開発の分野ではPC上に構築した仮想マシン上にテスト用の環境を作成し、そこで開発やテストを行う、というスタイルが一般的になっている。その場合に問題になるのが、本番環境とテスト/開発環境が同一になっていない、というケースだ。また、複数人の開発者が関わるプロジェクトでは開発者がそれぞれ自身のマシン上に仮想環境を構築して開発するという例も多いが、この場合開発者ごとのテスト/開発環境がそろっていないという問題も発生しうる

oh-my-zsh の環境で、peco-select-history が動かない - Qiita 追記 2014年 7月 7日 シェルスクリプトと書いてしまい漠然すぎましたが, ここで述べている ことが問題になるのは, .bashrc, .zshrcに関数, alias設定等がコピー される場合や, sourceコマンドでファイルを読み込む場合です. non-interactiveに実行されるシェルスクリプトについては特に 問題ないです. 問題点 そうしないと, 公開されたコマンドを自分の環境に導入した場合, aliasにより正しく動かなく場合があるためです. aliasをつけがちな コマンド(ls, grep等)がシェルスクリプトに含まれていると 特に問題が起こる可能性が高くなります. 例 pecoを使って カレントディレクトリのファイルをページャで開く 例を考えてみましょう. 単純に考