最新国产好看的视频,伊人天堂AV在线,国产Aaaaaa视频,蜜臀视频在线观看一区,人妻av色图,密臀久久久精品影片,青青视频免费观看毛片,久草在线观看视,国产三级精品色情在线

Google 處理采集數(shù)據(jù)的一些分析

  發(fā)布時(shí)間:2009-11-20 22:42:34   作者:佚名   我要評(píng)論
Google 用戶(hù)數(shù)據(jù)采集大揭秘.

點(diǎn)擊跟蹤

Google logs 把全部用戶(hù)在其服務(wù)產(chǎn)品上的引導(dǎo)點(diǎn)擊(廣告,行動(dòng),功能點(diǎn)擊等等)都記錄起來(lái)。

形式 -隨著用戶(hù)輸入數(shù)據(jù)的形式直接進(jìn)入(用戶(hù)名,密碼等),Google 記錄了時(shí)間和日期以及提交的位置。

google form Google 邪惡的一面:Google 用戶(hù)數(shù)據(jù)采集大揭秘

注冊(cè) Google 帳號(hào)時(shí)的表單

輸入類(lèi)型是隱藏的,使用戶(hù)不會(huì)看到或進(jìn)入特定領(lǐng)域的數(shù)據(jù)

向用戶(hù)發(fā)送后提交 (隱藏) 的位置

輸入類(lèi)型是隱藏的,所以用戶(hù)不會(huì)看到或進(jìn)入到特定數(shù)據(jù)里頭。

用戶(hù)使用引用數(shù)據(jù),并通過(guò)表格獲得怎樣才把”注冊(cè)”放在什么位置用戶(hù)會(huì)點(diǎn)擊

Cookies

Google 把它所有網(wǎng)站屬性的 Cookie 都用上了,此外,他還留下了廣告 Cookie 來(lái)跟蹤用戶(hù)在網(wǎng)站上的行為。通過(guò)這種方法,Google 就可以在有 doubleclick 和AdSense 廣告的網(wǎng)站下跟蹤該網(wǎng)站上任何一個(gè)用戶(hù)的網(wǎng)站行為。

google cookies Google 邪惡的一面:Google 用戶(hù)數(shù)據(jù)采集大揭秘

存儲(chǔ)的cookies列表

存儲(chǔ)在日志文件的服務(wù)器請(qǐng)求

每一個(gè)向 Google 服務(wù)器發(fā)出的請(qǐng)求都存儲(chǔ)在日志文件里頭,而存儲(chǔ)的內(nèi)容取決于發(fā)出請(qǐng)求的類(lèi)型。

google log Google 邪惡的一面:Google 用戶(hù)數(shù)據(jù)采集大揭秘

日志文件

URL - http://www.google.com/search?hl=en&q=seomoz&ie=UTF-8

從用戶(hù)付出的請(qǐng)求而獲得的 IP 地址,可以根據(jù)這個(gè)IP 地址定位該用戶(hù)的具體地理位置。

日期,時(shí)間和時(shí)區(qū)偏移的用戶(hù)

用戶(hù)的語(yǔ)言

用戶(hù)的操作系統(tǒng)

用戶(hù)的瀏覽器

其他信息就沒(méi)有那么重要但是必須具體的描述向服務(wù)器發(fā)出的請(qǐng)求,服務(wù)器的響應(yīng)和轉(zhuǎn)譯引擎。

Javascript

Google 有小部分的 JavaScript 已經(jīng)嵌入到互聯(lián)網(wǎng)上眾多的網(wǎng)站上面。當(dāng)用戶(hù)的瀏覽器執(zhí)行背景中的腳本時(shí)候,Google 就能夠知道很多關(guān)于這個(gè)用戶(hù)瀏覽習(xí)慣等重要信息(地理位置,操作系統(tǒng),瀏覽器類(lèi)型和版本等)

網(wǎng)站信標(biāo)

Google 向很多結(jié)算屏幕嵌入小尺寸的透明 gif 圖片,就好像 JavaScript 一樣,一個(gè)用戶(hù)下載隱形的圖片并且向 Google 發(fā)送他們的電腦信息。

網(wǎng)站信標(biāo)樣例(什么?你看不到?這才是重點(diǎn))

了解一下 Google 是怎樣處理這些數(shù)據(jù)

存儲(chǔ)

Google 使用一個(gè)內(nèi)部數(shù)據(jù)庫(kù)叫 BigTable 擴(kuò)展到近乎 100W 個(gè)服務(wù)器

Google Data In 2006

 

Data

Size (TB)

Crawl Index

800

Google Analytics

200

Google Base

2

Google Earth

70

Orkut

9

Personalized Search

4

這壓縮的數(shù)據(jù)的大小接近 TB(1024GB)。而 Google 透露的數(shù)據(jù)大小超過(guò) 1PB(1048576GB)。這甚至不需要考慮 AdSense,Gmail,Google Map,街景,Google圖片,或者其他私有數(shù)據(jù)庫(kù)。并且這些數(shù)據(jù)都是超過(guò)2年前的。

大量的數(shù)據(jù)分析

這就有點(diǎn)像 Charlie and the Chocolate Factory (電影《查理與巧克力工廠》)。我們都知道有很多數(shù)據(jù)都進(jìn)入到 Google 那里,我們也知道有大量處理好的數(shù)據(jù)會(huì)導(dǎo)出來(lái)。我們就只是不知道兩者之間是發(fā)生了什么,是怎么轉(zhuǎn)換的。

我們也知道 Google 本身有很多運(yùn)算法則組織他的數(shù)據(jù),Page Rank 就是最出名的了。據(jù)說(shuō),Google 也有很多復(fù)雜的 spam 的過(guò)濾系統(tǒng),內(nèi)容復(fù)制過(guò)濾系統(tǒng),類(lèi)型偵查運(yùn)算法則,自然語(yǔ)言解析程序,圖像識(shí)別軟件,和其他大量的復(fù)雜的軟件。

永久備份

Google 上的數(shù)據(jù)最終的棲息地可能會(huì)在永久存儲(chǔ)。Google 的隱私政策提示某些用戶(hù)數(shù)據(jù)永遠(yuǎn)都不會(huì)完全被刪除,因?yàn)橐呀?jīng)被永久的備份。

理解Google收集特定用戶(hù)的數(shù)據(jù)情況

以下都是一些當(dāng)用戶(hù)與很多網(wǎng)站交互的時(shí)候 Google 收集到的用戶(hù)的資料的清單列表。這意味著其實(shí)有更多的數(shù)據(jù)被 Google 收集而卻又沒(méi)有公開(kāi)的。不過(guò)其實(shí)無(wú)知就是幸福,當(dāng)你看完之后,你或許會(huì)感覺(jué)很不爽:

Google用戶(hù)數(shù)據(jù)收集情況匯總:Google用戶(hù)數(shù)據(jù)收集情況匯總

你能相信 Google 會(huì)幫你保密一切信息么? 你敢相信 Google 會(huì)遵守所有保密要求么?

原文地址:http://semwatch.org/2009/11/evil-of-google-data

相關(guān)文章

  • 網(wǎng)站收錄很低 為什么百度不采集你的網(wǎng)站?

    你的網(wǎng)站為什么百度不采集呢?其實(shí)原因很多,網(wǎng)站內(nèi)容重復(fù)太多,seo過(guò)度、改版等等,對(duì)于這種現(xiàn)象我們?cè)撛趺磻?yīng)對(duì)呢?現(xiàn)在說(shuō)說(shuō)百度不采集你的網(wǎng)站的原因和解決辦法,需要的
    2014-12-30
  • 網(wǎng)站采集工具大比拼

    目前站長(zhǎng)圈內(nèi),比較流行的采集工具有很多,但是總結(jié)起來(lái),比較出名的免費(fèi)的就這么幾個(gè),這里簡(jiǎn)單給大家介紹下, 方便需要的朋友
    2014-11-01
  • 防止網(wǎng)頁(yè)被搜索引擎爬蟲(chóng)和網(wǎng)頁(yè)采集器收錄的方法匯總

    最常規(guī)的防止網(wǎng)頁(yè)被搜索引擎收錄的方法是使用robots.txt,但是這樣做的弊端是要將所有已知的搜索引的爬蟲(chóng)信息都羅列進(jìn)去,難免有疏漏。
    2010-07-16
  • 讓采集網(wǎng)站內(nèi)容更有有價(jià)值

    利用采集來(lái)添加網(wǎng)站并沒(méi)有什么不對(duì),不僅小網(wǎng)站在做大網(wǎng)站也在做采集,而真正能體現(xiàn)網(wǎng)站價(jià)值的是網(wǎng)站帶給用戶(hù)的便利,這也是不同網(wǎng)站利用采集來(lái)的信息,有的能為用戶(hù)所接受
    2010-02-25
  • 建站經(jīng)驗(yàn) 你的網(wǎng)站該如何應(yīng)對(duì)被采集

    雖然采集站的SEO比較難。但踏實(shí)的寫(xiě)文章,在國(guó)內(nèi)這種氛圍下,很少會(huì)有人去做。
    2009-07-18
  • 提高采集內(nèi)容的排名

    現(xiàn)在很多網(wǎng)站都有抄襲和采集的行為,有了采集工具和目標(biāo)網(wǎng)站以后內(nèi)容再也不是什么頭疼的事。倒是如何提高采集內(nèi)容的排名成為了站長(zhǎng)們最為頭疼的問(wèn)題,如何提高采集內(nèi)容的排
    2009-05-26
  • 業(yè)余站長(zhǎng)與專(zhuān)業(yè)站長(zhǎng)PK

    業(yè)余站長(zhǎng)成功率真的很低很低,如果哪個(gè)業(yè)余站長(zhǎng)在三年之內(nèi)僥幸成功了,可以告訴我。不要把數(shù)萬(wàn)IP的垃圾站發(fā)我就行了。如果垃圾站有數(shù)萬(wàn)IP是不足不奇的,你的網(wǎng)站能在三年后
    2009-04-02
  • 采集文章的網(wǎng)站出路分析

    聽(tīng)人說(shuō),百度最近封殺了采集的網(wǎng)站,難到采集文章的網(wǎng)站一定沒(méi)有出路嗎?   個(gè)人覺(jué)得未必。 QQ空間 站是本人的網(wǎng)站。里面的內(nèi)容全是采集來(lái)的。記得第一次百度兩個(gè)星期左
    2008-12-31
  • 千巖:2007年我的站長(zhǎng)生涯總結(jié)

    我是一個(gè)習(xí)慣在互聯(lián)網(wǎng)上閱讀的人,遇到上好的文章就另存到我的電腦上,久之電腦的資料就顯得很零亂,當(dāng)時(shí)就想建立一個(gè)數(shù)據(jù)庫(kù),把這些文章保存起來(lái),就這樣開(kāi)始了我的站長(zhǎng)的
    2008-11-04
  • 垃圾網(wǎng)站怎么贏利

    很多站長(zhǎng)都在為自己的站發(fā)愁。為什么我的站流量那么低?為什么我的站收入那么少?原因很明顯,你建立的是垃圾站。 那么什么是垃圾站呢?網(wǎng)上關(guān)于垃圾站的定義和判斷標(biāo)準(zhǔn)
    2008-11-03

最新評(píng)論

浮山县| 长治市| 昌宁县| 石楼县| 青浦区| 沁水县| 鹤岗市| 兴安盟| 海淀区| 香格里拉县| 宁陕县| 百色市| 利津县| 宁城县| 岐山县| 漳浦县| 安国市| 万州区| 阿城市| 通渭县| 来宾市| 凌源市| 田林县| 视频| 团风县| 滦平县| 贺州市| 阿克| 长沙县| 新源县| 洛宁县| 改则县| 图们市| 仪陇县| 连山| 罗田县| 大荔县| 清徐县| 当涂县| 南雄市| 惠水县|