查看一下淘寶的robots,原來全站屏蔽所有蜘蛛,現(xiàn)在也開放了部分目錄。后來再想研究一下再次訪問robots.txt文件發(fā)現(xiàn)這個(gè)文件訪問受限了,估計(jì)只允許蜘蛛訪問了,當(dāng)然禁止訪問的方法不是本文的重點(diǎn)。
做全站SEO優(yōu)化數(shù)據(jù)分析時(shí),B2C或B2B平臺(tái)會(huì)有很多網(wǎng)店參與排名,但淘寶C店也參與進(jìn)來,這是不是太“奇怪”了呢?阿里巴巴旗下的天貓仍然全站屏蔽蜘蛛,既然都不允許抓取,為什么還要給排名呢?帶著這些疑問,筆者為大家剖析一下。
robots.txt的意義
這個(gè)文件可以設(shè)置允許什么搜索引擎來爬取,什么該抓,什么不能抓,是SEO最常用的方法。屏蔽那些敏感或低質(zhì)量的頁面,保證整體被收錄的內(nèi)容質(zhì)量,屬于站內(nèi)優(yōu)化的一個(gè)環(huán)節(jié),但是要注意以下環(huán)節(jié),參考文章
- 別讓網(wǎng)站的robots成為最大的安全漏洞
- 什么是robots協(xié)議對seo的影響
提交URL鏈接
目前各大搜索引擎都能提交非驗(yàn)證網(wǎng)站的鏈接,只需要把自己的電商網(wǎng)店提交到搜索引擎就行了。就這么簡單的操作就能讓你排在前面?再來看看一個(gè)類似的排名:QQ空間排名,可以看到QQ空間并沒有設(shè)置robots。
蜘蛛抓取內(nèi)容
早期QQ空間內(nèi)容是異步傳輸,蜘蛛只會(huì)識(shí)別空間名(Title標(biāo)題)、空間描述(Description描述),根本抓不了里面的動(dòng)態(tài)、文章,但QQ空間的用戶越來越少,人們最多是發(fā)個(gè)說說而且,再回來看看QQ空間源代碼已經(jīng)能抓到里面的內(nèi)容了,而且里面的鏈接也沒有nofollow。要是回到幾年前,買個(gè)幾萬個(gè)QQ號(hào),隨便寫內(nèi)容,這可是成本最低的發(fā)外鏈的方法!
筆者早期操作QQ空間排名很簡單,由于是異步加載,內(nèi)容完全不用考慮,只要空間的訪問量夠多,就能排名穩(wěn)定,F(xiàn)在只要你愿意操作QQ空間是要比操作新浪博客之類的要容易得多,畢竟新浪博客并不算社交軟件(國內(nèi)所謂的社交軟件指的是騰訊的微信與QQ),有社交屬性的流量會(huì)比較豐富,引流較容易。
淘寶店排名
淘寶SEO一般指的是淘寶自己的平臺(tái)內(nèi)搜索排名,而這里指的是搜索引擎下的淘寶店的SEO優(yōu)化排名。同樣的淘寶內(nèi)容也是異步加載,能抓到的也比較有限:標(biāo)題、描述、關(guān)鍵詞和一些其他布局的文字。
淘寶C店的首頁是流量最少的,很多人提交的都是首頁,這樣的排名是比較不穩(wěn)定的。如果你讀懂上面的QQ空間排名的方法,就應(yīng)該知道怎么做了把。筆者建議大家做淘寶SEO的時(shí)候盡量選擇流量較大的引流款,這樣該頁面的排名才能穩(wěn)定。