过期域名预定抢注

用戶名  找回密碼
 免费注册

輕鬆獲取 3500 萬個 Google Profile 信息

 火... [複製鏈接]
發表於 2011-6-2 10:58:05 | 顯示全部樓層 |閱讀模式
今年2月,安全研究專家Matthijs R. Koot很輕鬆的獲得了一個包含有3500個Google Profile信息的數據庫,包括有3500萬個用戶的Twitter說話記錄、真實姓名、Picasa圖片和郵件地址。由於每個人的Google Profile幾乎都是開放的,所以他輕鬆就批量抓取到了3500萬個人的信息,保存在一個SQL數據庫裡。
) ~; e- _& i, v7 P9 [! k* Z7 ^/ x; G* w
Google對其大規模大批量抓取Google Profile的行為沒有進行反應,就是說Google沒有阻攔他的爬蟲,沒有任何驗證碼機制,毫無限制的就允許他輕鬆的在一個月內的時間裡使用spidermonkey和其它Javascript代碼持續下載到了所有的信息,然後將他們轉移到數據庫裡保存。
" i7 E, P: S/ n. g/ c# C* c8 j1 g
實際上從2008年開始,Google的profiles-sitemap.xml就一直存在,其中包含了指向7000多個sitemap NNN(N).txt的文件,每個文件又包含了5000個指向Google Profile的超級鏈接,總共就是3500萬個。比如從sitemap-000.txt裡即可得到:
# c2 q/ \9 q& r) t& T8 ]8 s% b( E5 Y
https://profiles.google.com/117135902571938793602
. H6 N+ _7 U  y4 t" |! Vhttps://profiles.google.com/112006952710949332145+ c& w% S% K4 d4 P
https://profiles.google.com/105382462492606983441) I; N( v/ N, v5 d1 I7 E$ R
https://profiles.google.com/109299750146769054739
# ?2 f& r8 V5 vhttps://profiles.google.com/104555562341640123846) o4 T1 w4 g/ f- }& r1 O
https://profiles.google.com/1129568455187675356945 p: M& E) L8 h0 n: h2 N( y# X2 d
然後排出爬蟲抓取這些地址,即可得到3500萬用戶的Google Profile裡存儲的信息。實際上這一做法也是合法的,因為Google.com的robots.txt文件其實允許爬蟲索引Profile目錄,其中有這樣的字段:
( c6 c1 A* a3 C+ y9 C% t& v
0 D: ~$ m' L! x" g7 O, @. [& O# y, xAllow: /profiles
1 y% I9 M7 S* c* jAllow: /s2/profiles
' X8 e0 V% [  k- v0 mAllow: /s2/photos6 q  }5 C$ A5 ~$ f
Allow: /s2/static
5 D" r0 K( i) W3 @Matthijs R. Koot的這一研究實際是自己在阿姆斯特丹大學所做的隱私/匿名研究的一部分。最後Matthijs R. Koot還對Google表達了自己帳號不要被封的意願,因為他的Blog托管在Blogger。

評分

參與人數 1點點 +2 收起 理由
汉的骄阳 + 2

查看全部評分

發表於 2011-6-2 13:02:44 | 顯示全部樓層
這個確實不錯,也許可以用來發郵件
回復 给力 爆菊

舉報

發表於 2011-6-3 00:28:01 | 顯示全部樓層
強大的數據
回復 给力 爆菊

舉報

發表於 2011-6-3 14:36:09 | 顯示全部樓層
開放的google profile
回復 给力 爆菊

舉報

發表於 2011-6-3 16:54:41 | 顯示全部樓層
很難用的上
回復 给力 爆菊

舉報

發表於 2011-6-4 15:25:17 | 顯示全部樓層
我訪問這些鏈接怎麼是空白頁
回復 给力 爆菊

舉報

 樓主| 發表於 2011-6-7 09:33:39 | 顯示全部樓層
裡面是有數據的,不過只有少部分有郵箱和詳細情況,還是有價值的。
回復 给力 爆菊

舉報

發表於 2011-7-28 14:46:40 | 顯示全部樓層
要搜索還在分析數據~~
回復 给力 爆菊

舉報

發表於 2011-7-30 18:15:27 | 顯示全部樓層
違法的事情還是不要去做
回復 给力 爆菊

舉報

發表於 2011-8-17 18:09:28 | 顯示全部樓層
違法的事情
回復 给力 爆菊

舉報

您需要登錄後才可以回帖 登錄 | 免费注册

本版積分規則

點基跨境 數位編輯創業論壇

GMT+8, 2025-7-21 08:16

By DZ X3.5

小黑屋

快速回復 返回頂部 返回列表