Google検索結果を検証。必要なURLだけ取得したい。

スポンサーリンク

perlで取得した結果がなんか変だったので確かめてみます。

改めまして、「静岡」で検索しました。

静岡県公式ホームページ ふじのくに総合トップページ
/url?url=https://www.pref.shizuoka.jp/&rct=j&frm=1&q=&esrc=s&sa=U&ved=0ahUKEwj_gN3ikq3UAhXEyLwKHcYsAZ0QFggUMAA&usg=AFQjCNHGdMpNPtlQnLHiWYBYSVwHLO1B2Q
静岡の観光スポットランキングTOP10 - じゃらんnet
http://www.google.co.jp/url?url=http://www.jalan.net/kankou/210000/&rct=j&frm=1&q=&esrc=s&sa=U&ved=0ahUKEwj_gN3ikq3UAhXEyLwKHcYsAZ0QFggaMAE&usg=AFQjCNE4cTfOF0wUbD7JkGe1RrC_av9otw
静岡県 - Wikipedia
/url?url=https://ja.wikipedia.org/wiki/%25E9%259D%2599%25E5%25B2%25A1%25E7%259C%258C&rct=j&frm=1&q=&esrc=s&sa=U&ved=0ahUKEwj_gN3ikq3UAhXEyLwKHcYsAZ0QFgggMAI&usg=AFQjCNHykSNFBk5JnwvoeAFIVeLWCI0zNw
静岡市ホームページ
http://www.google.co.jp/url?url=http://www.city.shizuoka.jp/&rct=j&frm=1&q=&esrc=s&sa=U&ved=0ahUKEwj_gN3ikq3UAhXEyLwKHcYsAZ0QFggmMAM&usg=AFQjCNGudOxgX6qLRsXvbJtK5vFSfzfpog
ハローナビしずおか 静岡県観光情報公式ホームページ
http://www.google.co.jp/url?url=http://hellonavi.jp/&rct=j&frm=1&q=&esrc=s&sa=U&ved=0ahUKEwj_gN3ikq3UAhXEyLwKHcYsAZ0QFggsMAQ&usg=AFQjCNGU_HMOAGgIQVuPN5-3QhWJVLBkfw
絶対に行きたい!“静岡”のオススメ観光スポットランキングTOP40 ...
/url?url=https://retrip.jp/articles/5381/&rct=j&frm=1&q=&esrc=s&sa=U&ved=0ahUKEwj_gN3ikq3UAhXEyLwKHcYsAZ0QFggyMAU&usg=AFQjCNHnhe4qy_m68DO5BpCf_9TGgUy4JQ
@S[アットエス] | 静岡新聞SBSオフィシャルサイト
http://www.google.co.jp/url?url=http://www.at-s.com/&rct=j&frm=1&q=&esrc=s&sa=U&ved=0ahUKEwj_gN3ikq3UAhXEyLwKHcYsAZ0QFgg5MAY&usg=AFQjCNE23oUpCnBS0o8w4kCqUr-2h1zDyg
静岡銀行
http://www.google.co.jp/url?url=http://www.shizuokabank.co.jp/&rct=j&frm=1&q=&esrc=s&sa=U&ved=0ahUKEwj_gN3ikq3UAhXEyLwKHcYsAZ0QFgg_MAc&usg=AFQjCNEBmOgVkUxIxApdGuYanF1wSyaX6Q
しずおか観光情報 駿府静岡市 最高の体験と感動を
http://www.google.co.jp/url?url=http://www.visit-shizuoka.com/&rct=j&frm=1&q=&esrc=s&sa=U&ved=0ahUKEwj_gN3ikq3UAhXEyLwKHcYsAZ0QFghFMAg&usg=AFQjCNFG0tL7qh0Pox9xAwuEbfDdi1jGiA
静岡大学:トップページ
http://www.google.co.jp/url?url=http://www.shizuoka.ac.jp/&rct=j&frm=1&q=&esrc=s&sa=U&ved=0ahUKEwj_gN3ikq3UAhXEyLwKHcYsAZ0QFghLMAk&usg=AFQjCNFiJHo-BZx3TzNKZJot5_Y-HFaXcA

実際にブラウザから検索してみました。
上から3件ですが、以下のようになっていました。

静岡県公式ホームページ ふじのくに総合トップページ
https://www.google.co.jp/url?sa=t&rct=j&q=&esrc=s&source=web&cd=1&cad=rja&uact=8&ved=0ahUKEwj8lrrRka3UAhXHu7wKHbPSApwQFggnMAA&url=https%3A%2F%2Fwww.pref.shizuoka.jp%2F&usg=AFQjCNGQOwfv93PFx9bbQv8t6qbPwwJdpA&sig2=25OMRKGO_9No4H9r1UlY-A
静岡の観光スポットランキングTOP10 - じゃらんnet
https://www.google.co.jp/url?sa=t&rct=j&q=&esrc=s&source=web&cd=2&cad=rja&uact=8&ved=0ahUKEwj8lrrRka3UAhXHu7wKHbPSApwQFggtMAE&url=http%3A%2F%2Fwww.jalan.net%2Fkankou%2F210000%2F&usg=AFQjCNHWDzurqyzxpvyf-X7pL4EBkk4a0w&sig2=HFDrxBA552FM4ObWVxP9aw
静岡市ホームページ
https://www.google.co.jp/url?sa=t&rct=j&q=&esrc=s&source=web&cd=3&cad=rja&uact=8&ved=0ahUKEwj8lrrRka3UAhXHu7wKHbPSApwQFggzMAI&url=http%3A%2F%2Fwww.city.shizuoka.jp%2F&usg=AFQjCNF4FIjZYBGomvMRfmGA7MjBDElrXQ&sig2=2tD8x-R-fDPW52DwJOqE7Q

ブラウザと比較してみました。

静岡県公式ホームページ ふじのくに総合トップページ
[perl] /url?url=https://www.pref.shizuoka.jp/&rct=j&frm=1&q=&esrc=s&sa=U&ved=0ahUKEwj_gN3ikq3UAhXEyLwKHcYsAZ0QFggUMAA&usg=AFQjCNHGdMpNPtlQnLHiWYBYSVwHLO1B2Q
[ブラウザ] https://www.google.co.jp/url?sa=t&rct=j&q=&esrc=s&source=web&cd=1&cad=rja&uact=8&ved=0ahUKEwj8lrrRka3UAhXHu7wKHbPSApwQFggnMAA
&url=https%3A%2F%2Fwww.pref.shizuoka.jp%2F&usg=AFQjCNGQOwfv93PFx9bbQv8t6qbPwwJdpA&sig2=25OMRKGO_9No4H9r1UlY-A
[実際につながるページ] https://www.pref.shizuoka.jp/
静岡の観光スポットランキングTOP10 - じゃらんnet
[perl] http://www.google.co.jp/url?url=http://www.jalan.net/kankou/210000/&rct=j&frm=1&q=&esrc=s&sa=U&ved=0ahUKEwj_gN3ikq3UAhXEyLwKHcYsAZ0QFggaMAE&usg=AFQjCNE4cTfOF0wUbD7JkGe1RrC_av9otw
[ブラウザ] https://www.google.co.jp/url?sa=t&rct=j&q=&esrc=s&source=web&cd=2&cad=rja&uact=8&ved=0ahUKEwj8lrrRka3UAhXHu7wKHbPSApwQFggtMAE
&url=http%3A%2F%2Fwww.jalan.net%2Fkankou%2F210000%2F&usg=AFQjCNHWDzurqyzxpvyf-X7pL4EBkk4a0w&sig2=HFDrxBA552FM4ObWVxP9aw
[実際につながるページ] http://www.jalan.net/kankou/210000/
静岡市ホームページ
[perl] http://www.google.co.jp/url?url=http://www.city.shizuoka.jp/&rct=j&frm=1&q=&esrc=s&sa=U&ved=0ahUKEwj_gN3ikq3UAhXEyLwKHcYsAZ0QFggmMAM&usg=AFQjCNGudOxgX6qLRsXvbJtK5vFSfzfpog
[ブラウザ] https://www.google.co.jp/url?sa=t&rct=j&q=&esrc=s&source=web&cd=3&cad=rja&uact=8&ved=0ahUKEwj8lrrRka3UAhXHu7wKHbPSApwQFggzMAI
&url=http%3A%2F%2Fwww.city.shizuoka.jp%2F&usg=AFQjCNF4FIjZYBGomvMRfmGA7MjBDElrXQ&sig2=2tD8x-R-fDPW52DwJOqE7Q
[実際につながるページ] http://www.city.shizuoka.jp/

リンクを実際に開くと短くなりますね。
というかグーグルを一旦経由してクリック数などをグーグルに送信する仕組みになっているのでしょうね。
perlもブラウザも
url= の後、と言うのは共通ですね。
でも終端が違いますね。

[perl] &rct=
[ブラウザ] &usg=
まで、ということでしょうか。

perlですから、

url=[ここを取得]&rct

とすれば取得できそうです。

スポンサーリンク







シェアする

  • このエントリーをはてなブックマークに追加

フォローする

スポンサーリンク