十一月Mozscape指數推出

作者 Admin 瀏覽 發布時間 12/11/10

 十一月Mozscape指數的推出,比原定時間晚了幾天。最初抓取數據量的計算錯誤,而事實上,我們的抓取工具是非常有效的,我們的第一個索引嘗試這個月的兩倍左右大小的77十億的URL目標。如果我們沒有這個計算錯誤,我們本來可以打我們的原始發布之日起11/5,但重新啟動造成的指數發布日期滑了幾天。 

打嗝,我們遇到了這個月的七十六億的URL處理。花多一點的時間比我們以前即月期指,這是只有五十五億的網址。這離譜明顯的在我們的索引處理的一個具體步驟。定期在整個處理,我們檢查站已處理的文件,所以我們可以回滾,如果發生一些災難性的(一臺機器出現故障,文件損壞等)。指數本月,這些檢查點的步驟明顯較長,在某些情況下,一些較大的步驟進行檢查點,花了好幾天時間。的天才工程師的Mozscape隊,  馬丁和布蘭登能拿出一個解決方案,大大減少所花費的時間檢查點。隨著馬丁的更新處理軟件,所花費的時間從數天縮短到短短幾分鐘內被切斷某些步驟!一旦再次,  退后一步  所帶來的Mozscape的團隊進兩步。

Mozscape團隊繼續完成我們的私有云解決方案在弗吉尼亞州做出一些重大的進步。我們指數在AWS的云和我們自己的私有云年底的軌道上。完成一個成功的測試指標后,第一Mozscape指數是在進步,我們自己的私有云中運行。這是一個令人振奮的成就的Mozscape隊!

鹽城市高朋網絡科技有限公司 公司地址:鹽城市亭湖區文港南路悅達新村7幢506室 聯系電話:0515-88333351
鹽城網絡公司 Copyright 2011-2012 www.oekzqo.live 版權所有 禁止轉載
鄂B2-20030044
云南快乐10分中奖明细