Google

15日に書いた、常時SSL(AOSSL)の流れで301リダイレクトさせるようにした件。

9552回の301応答に対して200 OKはたった304回 — analogより

そのうちGoogleやYahoo!のキャッシュがリフレッシュされ、直接HTTPSでリファラが飛んでくるようになるかと思いきや、逆に1日に200近くだったアクセス数がどんどん減ってここ数日は安定的に100も越えなくなった。

analogの解析結果を見たところ、9552回の301リダイレクトに対して200 OKはたった304回しかなく、GooglebotやYahoo!のクローラがリダイレクト後のフォローをしていない気配。

なんでクローラがリトライして来ないのかと考えていたのだが、ウェブマスターツール改めGoogle Search Consoleを確認したところ、robots.txtの内容として

User-agent: *
Disallow: /

を返しているので、クロール対象外になっている事がわかった。

よくよく調べてみると、/etc/apache2/sites-available/www.bravotouring.com.confの

<VirtualHost *:443>

側設定が

Alias /robots.txt /home/yano/public_html/robots.Disallow_all

となっていたので、

Alias /robots.txt /home/yano/public_html/robots.txt

に変更。ウェブマスターツール改めGoogle Search Consoleで

User-agent: yodaobot
Disallow: /
User-agent: YodaoBot
Disallow: /

となる事を確認し、一段落。

参照

Google Search Console https://www.google.com/webmasters/tools/

Wikipedia https://ja.wikipedia.org/wiki/

昨日書いた、常時SSL(AOSSL)の流れでHTTPリファラが獲れなくなった件。

bravotouring.comでも1年前からHTTPSサポートしているので、HTTPS同士で遷移すればリファラ出してくれてもいいような気がしたのだが、よく考えるとGoogleやYahoo!がindexしているのが"http:～“なので、こちらからは手出しのしようがない。

取り敢えず、.htaccessを

*** .htaccess.old  2014-08-25 23:24:54.278343341 +0900
--- .htaccess   2017-03-15 17:44:49.937510550 +0900
***************
*** 3,8 ****
--- 3,12 ----
  DirectoryIndex rnote.php
  RewriteEngine on
+ RewriteCond %{HTTPS} off
+ #RewriteRule ^(.*)$ https://%{HTTP_HOST}%{REQUEST_URI} [R,L]
+ RewriteRule ^(.*)$ https://www.bravotouring.com/~yano/$1 [R=301,L]
+
  RewriteBase /~yano/
  #RewriteRule ^(index.html?)$ rnote.php [L]
  RewriteRule ^(.+\.htm)$ rnote.php?u=$1&%{QUERY_STRING} [L]

…てな感じにして、HTTPでリクエストが来てもHTTPSで出直すようにリダイレクトさせてみたが、やはりHTTPで出す流れの中でリファラが排除されているので、リダイレクトされた際にわざわざリファラを付け直すという事は無く、無駄に終わった。

しかし、GooglebotやYahoo!のクローラも同様にリダイレクトされる事から、時が経てばGoogleやYahoo!のindexも必然的に"https:～“になると思われるので、その時にリファラが復活する可能性があるかも！？

参照

ホワイトベアー株式会社 http://whitebear-seo.com/

httpからhttpsに.htaccessを使ってリダイレクトさせる方法 2016年4月1日

さくらのSSL https://ssl.sakura.ad.jp/

常時SSL化（https化）のメリットと必要性とは 2017年8月29日

Wikipedia https://ja.wikipedia.org/wiki/

2008年から稼動中の「検索語ランキング」。HTTPリファラに基づくAnalogの検索語句レポートを活用したものだが、最近どうもカウントが少なすぎる。

GoogleやYahoo!のクエリがまた変わってカウントが漏れているのかと調べていたのだが、どうやらGoogleやYahoo!が常時SSL（AOSSL）した事から検索クエリを含むHTTPリファラ自体が送られなくなったという事だ。

具体的には

Yahoo! JAPANではお客様により安全にサービスをご利用いただくため、2016年4月から2017年3月にかけて、Yahoo! JAPANトップページやYahoo!ニュースを含むすべてのサービスにおいて常時SSL（AOSSL）に対応いたします（※1）。

今後、Yahoo! JAPAN（HTTPS）から外部サイト（HTTP）にページ遷移する場合、原則、HTTP Referer（リファラ）は送出されなくなります（※2）。そのため、HTTP Refererを利用してYahoo! JAPANからサイトへの流入量を計測することはできなくなりますので、ご注意ください。

との事。

常時SSL(Always on SSL)の流れでHTTPリファラが影響を受けるのは盲点だったが、裏返すと参照先もHTTPSであれば今まで通りHTTPリファラを出すという事になるのかな？