�Ȥ����櫓����˺Ͽ����ˡ�

[��] Yahoo! Slurp �� rel="nofollow" ��̵�뤵�줿
Yahoo! Slurp �˰��Ƥ˥�����������ƥ����ФΥ����ɥ��٥졼�������С� �Ȥꤢ������CGI������ץȤΥե�����̾���ѹ����Ʋ���

robots.txt

�Ǥ����Ū�ʤΤ����졣���Ĥ򤯤󤬤�����Τ�ʤ��Ϥ��Ϥʤ��Τ����ɰ�����ܤ���Ȥ������Ȥǡ�

http://www.dan.co.jp/robots.txt

���ʤߤ˺Ǹ�Υ磻��ɥ����ɤ�Ȥä������������λ��ͤˤ����äƤ��ʤ��Τ����ɡ�googlebot�ʤɤϥ��ݡ��Ȥ��Ƥ���Ƥ���ߤ�����ʸˡ�򸡾ڤ��Ƥ���륵���Ȥ⤢��ޤ���

�����Ȥ��Ƥϡ����Υ����Ȥ�DocumentRoot�˽񤭹��ย�¤��ʤ��ȻȤ��ʤ����ȡ������ޤǤ�»ζ���ʤΤǹԵ��ΰ����������顼�ˤ�̵�뤵��뤳�ȤǤ���

BrowserMatch/SetEnvIf

��궯�Ϥ���DocumentRoot�˥��������Ǥ��ʤ��Ƥ⡢.htaccess�ˤ����񤭹����лȤ���Τ����μ�Ǥ���Apache 1.3�ʹߤǥ��ݡ��Ȥ��Ƥ��ޤ���

�㤨�С�

[��] Baidu�褱
���θ������󥸥��ɴ�١�(Baidu)�Υ�������ϸ������ɤ����ƺ��롣 ���ΤȤ��������Ϥʤ��Τǥ����������ݤ��Ƥ������Ȥˡ�

�ϡ��ʲ��Τ褦�˴�ñ������Ǥ��ޤ���

# mod_setenvif
BrowserMatchNoCase "baiduspider" evilua
# mod_access
Order allow,deny                        
Allow from all
Deny from env=evilua

���ڤ�LWP��°��lwp-request���ޥ�ɤ�Ȥäơ��ʲ��Τ褦�˹Ԥ����Ȥ�����ޤ���

% lwp-request -mHEAD -H 'User-Agent: baiduspider' http://www.dan.co.jp/~dankogai/uatest/
403 Forbidden
Connection: close
Date: Sat, 28 Oct 2006 13:19:43 GMT
Server: Apache/1.3.33 (Unix) mod_perl/1.29 DAV/1.0.3
Content-Type: text/html; charset=iso-8859-1
Client-Date: Sat, 28 Oct 2006 13:19:32 GMT
Client-Peer: 219.127.162.235:80
Client-Response-Num: 1

% lwp-request -mHEAD http://www.dan.co.jp/~dankogai/uatest/
200 OK
Connection: close
Date: Sat, 28 Oct 2006 13:19:54 GMT
Server: Apache/1.3.33 (Unix) mod_perl/1.29 DAV/1.0.3
Content-Type: text/html
Client-Date: Sat, 28 Oct 2006 13:19:43 GMT
Client-Peer: 219.127.162.235:80

���ΤȤ��������֤�����ʤΤ�������ˡ�Ǥ���������󡢾�Ǹ����̤ꡢUser-Agent:�إå����Ϥ�����Ǥ⵶���Ǥ��ޤ����������ޤǹԤ��ΤϤ�Ϥ䥯�����顼�Ȥ����������ʰ��դ�����ȸ��ʤ��٤��ǡ��н����ˡ��֤�����Ǥ�פ���֤��äѤ��Ǥ�פ��Ѥ���ɬ�פ�����Ǥ��礦��

����������򸫤ƥ���åȥ�����

��ɤ��Ĥ򤯤󤬼�ä���ˡ��

[��] Baidu�褱
order allow,deny allow from all deny from 60.28.17

���ä��櫓�Ǥ���������ϡ֤��äѤ��Ǥ����ˡ�ʤΤǡ��Ǹ�����Ȥ��ƤȤäƤ����٤��Ǥ��礦��ñ�ʤ���ܥåȽ����Ȥ��Ƥ����Ȥ��Τϡ����ǤҤ���괶���ݤ�ޤ��󡣤�äȤ⡢���ΰ��������ˡ��֤��ޤ��Ϥ�����ܥåȤ��פȸ��äƤ���Τǡ�����ۤɤ����Ǥ�ʤ��ΤǤ������Ǥ��Ϥ�User-Agent�������IP���ɥ쥹�����ޤ��ˤ��Ƥ���������ΤǤ���

�Ȥꤢ������˺Ͽ�Ȥ��ƤϤ���ʤȤ�������

Dan the Man with too Many Web Sites to Administer

�ɵ�:

��������
�äƤ��������Ĥ���̵���¤�ʤ�����������������

���Ĥ����ʪ�������Ĥ����Τǡ�spoiler���Τ�ĤĤ��礳�äȲ��⡣

404 Blog Not Found:��������Ž�դ���50����ˡ
������50�⤢��ޤ���Paul Simon�β��Τ⤸��Ǥ����Ϥ������ʤߤ�6���ܡ�������Ǥ���Paul Simon���ä�50��Ҳ𤷤Ƥʤ���Ǥ����顣

�Ȥ������ȤǤ���