網(wǎng)站流量超標(biāo)排查網(wǎng)站出現(xiàn)流量超標(biāo)時(shí)分析及解決思路為: 查看網(wǎng)站訪問(wèn)統(tǒng)計(jì)---->結(jié)合訪問(wèn)統(tǒng)計(jì)分析網(wǎng)站訪問(wèn)日志---->確定原因采取相應(yīng)措施。 網(wǎng)站流量異常增大的主要原因可能有:
請(qǐng)根據(jù)自身網(wǎng)站的情況,結(jié)合以上可能原因及“訪問(wèn)統(tǒng)計(jì)”、“WWW日志”提供的數(shù)據(jù)參考,自行分析原因并采取相應(yīng)的對(duì)策。 如果需要我司工程師幫助分析具體原因,請(qǐng)提交工單申請(qǐng),視情況收費(fèi)100~200元/站點(diǎn)。海量的日志分析比較耗時(shí),不同的網(wǎng)站的情況各有不同, 比如搜索引擎的抓取有些用戶是必要的,有些用戶覺得無(wú)所謂,流量太高就可以攔截,有的則認(rèn)為不能攔截。所以沒有固定的現(xiàn)成的答案。 注:流量問(wèn)題都是針對(duì)具體不同的網(wǎng)站來(lái)的,個(gè)別用戶會(huì)質(zhì)疑會(huì)不會(huì)是服務(wù)器或機(jī)房的問(wèn)題導(dǎo)致了流量異常,答案是否定的。 最近一段時(shí)間以來(lái),確實(shí)出現(xiàn)了一些新的情況,比如AI機(jī)器人的頻繁訪問(wèn),這是以前沒有的,所以以前流量很小的網(wǎng)站現(xiàn)在突然流量比較大, 也可能是出現(xiàn)了新的情況,需要具體分析。這種流量突然增長(zhǎng)的情況,如果換一個(gè)服務(wù)商,或者換到云服務(wù)器上,相應(yīng)的訪問(wèn)量也會(huì)跟著過(guò)去。 相關(guān)產(chǎn)品: 異常流量清洗服務(wù)產(chǎn)品介紹 一.查看網(wǎng)站訪問(wèn)統(tǒng)計(jì) 1. 登錄到虛擬主機(jī)管理面板,點(diǎn)擊“訪問(wèn)統(tǒng)計(jì)”和“流量分析”,
2.首先查看訪問(wèn)統(tǒng)計(jì)中瀏覽器與非瀏覽器流量確定流量類型。 3.根據(jù)流量類型詳細(xì)查看訪問(wèn)統(tǒng)計(jì)數(shù)據(jù): 3.1如是瀏覽器流量占用高,可查看 等統(tǒng)計(jì)數(shù)據(jù),以確定網(wǎng)站中是哪類文件,哪些url地址被大量訪問(wèn),以及是哪些IP,哪些蜘蛛等訪問(wèn)量大。 3.2如是非瀏覽器流量占用高,可查看 確定是什么狀態(tài)情況下產(chǎn)生的非瀏覽器流量。 二.分析網(wǎng)站訪問(wèn)日志 根據(jù)網(wǎng)站訪問(wèn)統(tǒng)計(jì)中按“按日期統(tǒng)計(jì)”數(shù)據(jù)找一天流量較大的日志下載至本地使用記事本編輯器打開對(duì)日志具體分析核實(shí)。 通常只需找最近三天左右的日志即可, windows主機(jī)可以點(diǎn)擊“www日志”下載訪問(wèn)日志到wwwroot目錄下,再通過(guò)ftp方式連接下載 至本地使用編輯器打開查看。 Linux主機(jī)通過(guò)ftp連接主機(jī)打開logs目錄下即可下載最近的日志。 如要下載歷史日志,可以點(diǎn)擊 “www日志”--“獲取歷史日志”。 三.處理措施 3.1 正常訪問(wèn)情況主機(jī)流量配置低導(dǎo)致超標(biāo)。如占用流量的文件類別、url網(wǎng)址、搜索蜘蛛、訪問(wèn)IP等數(shù)據(jù)都較均衡,無(wú)明顯差異等。 請(qǐng)升級(jí)主機(jī)至流量配額更大的型號(hào),如獨(dú)享虛擬主機(jī)(流量配額較大),或不限流量的云服務(wù)器。 3.2 網(wǎng)站頁(yè)面數(shù)據(jù)過(guò)大導(dǎo)致流量超標(biāo)。如首頁(yè)中加載的圖片過(guò)大,同時(shí)圖片設(shè)計(jì)過(guò)大等,可聯(lián)系網(wǎng)站程序方人員減少頁(yè)面的圖片數(shù), 3.3 某類文件被大量請(qǐng)求下載等導(dǎo)致超標(biāo)。如網(wǎng)站的圖片、mp4等文件被外部盜鏈/下載等,可開啟防盜鏈功能。如果仍然流量大,可考慮將文件存放至其他第三方網(wǎng)站進(jìn)行引用,或升級(jí)主機(jī)至不限流量的云服務(wù)器。 3.4 其他某搜索引擎蜘蛛、IP、useragent等導(dǎo)致流量超標(biāo)異常的?赏ㄟ^(guò)web.config或.htaccess進(jìn)行攔截屏蔽。 屏蔽攔截搜索引擎蜘蛛、useragent的訪問(wèn)抓取等:http://faq.myhostadmin.net/faq/list.asp?unid=662 屏蔽限制ip訪問(wèn):http://faq.myhostadmin.net/faq/list.asp?unid=681 3.5 平時(shí)流量很小,突然一兩天來(lái)了非常大的流量:是否有做活動(dòng),是否有發(fā)文章轉(zhuǎn)載到公眾號(hào)被大量轉(zhuǎn)發(fā)等事件,如果沒有, 可以禁止境外訪問(wèn),或拒絕某些IP段的訪問(wèn),也可以限制單個(gè)IP同時(shí)訪問(wèn)的數(shù)量等。 也可以配置防盜鏈措施: http://faq.myhostadmin.net/faq/list.asp?unid=628 避免自己網(wǎng)站的圖片,mp3視頻等資源被其他網(wǎng)站引用導(dǎo)致的異常流量過(guò)高。(注意:采用防盜鏈措施的情況下,直接發(fā)網(wǎng)站圖片等鏈接給用戶,用戶是無(wú)法訪問(wèn)的,只有正常訪問(wèn)網(wǎng)站才能顯示相關(guān)圖片,以達(dá)到防盜鏈的目的) 3.6 分析到某客戶端UA訪問(wèn)請(qǐng)求異常,可通過(guò)web.config或.htaccess規(guī)則文件屏蔽User_Agent(UA)訪問(wèn):http://faq.myhostadmin.net/faq/list.asp?unid=2595 若異常流量的IP和客戶端UA經(jīng)常變化導(dǎo)致無(wú)法人工攔截,可以考慮 購(gòu)買 異常流量清洗服務(wù)
四.相關(guān)案例 4.1 正常訪問(wèn)情況主機(jī)流量配置低 從訪問(wèn)統(tǒng)計(jì)可見占用流量的文件類別主要為php、js、png、css。訪問(wèn)最多的網(wǎng)址為首頁(yè)。而訪問(wèn)IP,搜索蜘蛛等占量無(wú)異常。 通過(guò)下載網(wǎng)站日志核實(shí),日志中也均正常的訪問(wèn)記錄無(wú)明顯異常請(qǐng)求。 此情況則為正常訪問(wèn)而主機(jī)流量不足導(dǎo)致超標(biāo),應(yīng)升級(jí)主機(jī)。 4.2 網(wǎng)站頁(yè)面數(shù)據(jù)過(guò)大 從統(tǒng)計(jì)可見占用流量最多的是圖片類文件,訪問(wèn)網(wǎng)址最多的是首頁(yè)。 從訪問(wèn)日志中可見,請(qǐng)求的圖片量較大,通過(guò)瀏覽器可見圖片也相對(duì)偏大。 此情況可考慮優(yōu)化減小圖片大小(通常圖片大小不應(yīng)超過(guò)300KB),或升級(jí)主機(jī)。 4.3 非瀏覽器流量大某文件被下載 從訪問(wèn)統(tǒng)計(jì)可見非瀏覽器206狀態(tài)占用大量流量,文件類別為mp4且文件較大。 206是斷點(diǎn)續(xù)傳下載,由此可判斷mp4文件被下載導(dǎo)致。 此情況可考慮將文件存放至其他第三方網(wǎng)站進(jìn)行引用,或升級(jí)主機(jī)至不限流量的云服務(wù)器。 4.3 搜索引擎蜘蛛/機(jī)器人等占用流量 從訪問(wèn)統(tǒng)計(jì)可見Googlebot(google蜘蛛)占用大量流量。 從訪問(wèn)日志可見Googlebot對(duì)網(wǎng)站某個(gè)地址進(jìn)行大量的訪問(wèn)抓取,通過(guò)反查IP是真實(shí)的google蜘蛛。 此情況如不考慮seo優(yōu)化影響情況下,可以通過(guò)規(guī)則對(duì)googlebot進(jìn)行屏蔽。 類似情況還可能有Baiduspider(百度蜘蛛)對(duì)網(wǎng)站的大量訪問(wèn)抓取。 請(qǐng)自行根據(jù)日志排查,可自行限制部分IP或蜘蛛。建議可考慮升級(jí)主機(jī)型號(hào)解決,或購(gòu)買 異常流量清洗服務(wù)產(chǎn)品 進(jìn)行攔截和防護(hù)。 若需要我司工程師協(xié)助解決,請(qǐng)?zhí)峤还,視情況收費(fèi)100~200元/站點(diǎn)。
|
|||||
| >> 相關(guān)文章 | |||||
|
|
|||||
400-028-5800
028-62778877
您好,非正常上班時(shí)間若有緊急技術(shù)問(wèn)題,請(qǐng)撥總機(jī)后按7號(hào)鍵, 其他問(wèn)題請(qǐng)?zhí)峤还位蛟谏习鄷r(shí)間聯(lián)系,謝謝支持!