建站
咨詢
售后
建站咨詢
新聞中心
您是否正在尋找一種方法來防止垃圾評(píng)論發(fā)送者和詐騙者使用內(nèi)容抓取工具采集您的wordpress博客內(nèi)容？
創(chuàng)新互聯(lián)公司是一家專注于成都網(wǎng)站設(shè)計(jì)、成都網(wǎng)站建設(shè)與策劃設(shè)計(jì),館陶網(wǎng)站建設(shè)哪家好?創(chuàng)新互聯(lián)公司做網(wǎng)站,專注于網(wǎng)站建設(shè)十多年,網(wǎng)設(shè)計(jì)領(lǐng)域的專業(yè)建站公司;建站業(yè)務(wù)涵蓋:館陶等地區(qū)。館陶做網(wǎng)站價(jià)格咨詢:13518219792
作為網(wǎng)站所有者，看到有人在未經(jīng)許可的情況下采集您的內(nèi)容，從中獲利，在Google等搜索引擎上的排名超過您，這是非常令人沮喪的。
在本教程中，我們將介紹什么是博客內(nèi)容采集、如何減少和防止內(nèi)容采集，甚至如何利用內(nèi)容抓取來為自己謀利。
什么是博客內(nèi)容抓??？
博客內(nèi)容采集抓取是指從眾多來源獲取內(nèi)容并在另一個(gè)站點(diǎn)上重新發(fā)布的內(nèi)容。通常這是通過您博客的RSS Feed自動(dòng)完成的。
內(nèi)容抓取現(xiàn)在非常容易，任何人都可以啟動(dòng)WordPress網(wǎng)站，放置免費(fèi)或商業(yè)主題，并安裝一些插件，這些插件將從選定的博客中采集內(nèi)容。
為什么內(nèi)容抓取工具會(huì)采集我的內(nèi)容？
我們的一些用戶問我們?yōu)槭裁匆杉业膬?nèi)容？簡(jiǎn)單的答案是因?yàn)槟愫馨?。事?shí)是，這些內(nèi)容抓取者別有用心。以下是有人會(huì)采集您的內(nèi)容的幾個(gè)原因：
- 聯(lián)盟傭金– 有一些骯臟的聯(lián)盟營(yíng)銷人員只是想利用該系統(tǒng)賺取額外的錢。他們將使用您的內(nèi)容和其他人的內(nèi)容通過搜索引擎為他們的網(wǎng)站帶來流量。這些網(wǎng)站通常針對(duì)特定的利基市場(chǎng)，因此他們有正在推廣的相關(guān)產(chǎn)品。
- 潛在客戶生成——我們經(jīng)常看到律師和房地產(chǎn)經(jīng)紀(jì)人這樣做。他們希望在自己的小社區(qū)中看起來像行業(yè)領(lǐng)導(dǎo)者。他們沒有足夠的帶寬來制作高質(zhì)量的內(nèi)容，所以他們出去從其他來源抓取內(nèi)容。有時(shí)，他們甚至沒有意識(shí)到這一點(diǎn)，因?yàn)樗麄兠吭轮Ц?0美元來添加內(nèi)容并幫助他們獲得更好的SEO。我們過去遇到過不少這樣的情況。
- 廣告收入——有些人只想創(chuàng)建一個(gè)知識(shí)“中心”。為特定領(lǐng)域的用戶提供一站式服務(wù)。我們經(jīng)常注意到我們的網(wǎng)站內(nèi)容正在被抓取。刮板者總是回答說，我這樣做是為了社區(qū)的利益。除了該網(wǎng)站貼滿廣告。
這些只是有人會(huì)采集您的內(nèi)容的幾個(gè)原因。
如何捕捉內(nèi)容爬蟲？
捕獲內(nèi)容抓取工具是一項(xiàng)乏味的任務(wù)，可能會(huì)占用大量時(shí)間。您可以通過幾種方法來捕獲內(nèi)容抓取工具。
用你的文章標(biāo)題在谷歌搜索
是的，這聽起來很痛苦。這種方法可能不值得，特別是如果你正在寫一個(gè)非常流行的話題。
引用
如果您在文章中添加內(nèi)部鏈接，如果網(wǎng)站采集您的內(nèi)容，您會(huì)注意到引用。這種方式幾乎是告訴您他們正在刮您的內(nèi)容。
如果您使用Akismet，那么很多這些引用將顯示在垃圾評(píng)論文件夾中。同樣，這僅在您的文章中有內(nèi)部鏈接時(shí)才有效。
Ahrefs
如果您可以使用Ahrefs之類的 SEO 工具，則可以監(jiān)控您的反向鏈接并留意被盜內(nèi)容。
如何處理內(nèi)容抓取工具
人們?cè)谔幚韮?nèi)容采集工具時(shí)采用的方法很少：無所作為方法、刪除方法或利用它們的方法。
讓我們來看看每一個(gè)。
什么都不做的方法
這是迄今為止您可以采取的最簡(jiǎn)單的方法。通常最受歡迎的博主會(huì)推薦這個(gè)，因?yàn)樗枰芏鄷r(shí)間來對(duì)抗爬蟲。
現(xiàn)在很明顯，如果是像Smashing Magazine、CSS-Tricks、Problogger等知名博客，那么他們就不必?fù)?dān)心了。他們是谷歌眼中的權(quán)威網(wǎng)站。
然而，我們知道一些好的網(wǎng)站被標(biāo)記為采集工具，因?yàn)楣雀枵J(rèn)為他們的采集工具是原始內(nèi)容。因此，在我們看來，這種方法并不總是最好的。
采取措施
這與“什么都不做”的方法完全相反。在這種方法中，您只需聯(lián)系抓取工具并要求他們刪除內(nèi)容。
如果他們拒絕這樣做或根本不回復(fù)您的請(qǐng)求，那么您可以向他們的主機(jī)提交DMCA（數(shù)字千年版權(quán)法案）。
根據(jù)我們的經(jīng)驗(yàn)，大多數(shù)抓取網(wǎng)站都沒有可用的聯(lián)系表格。如果他們這樣做，然后利用它。如果他們沒有聯(lián)系表，那么您需要進(jìn)行Whois查詢。
您可以在管理聯(lián)系人上看到聯(lián)系信息。通常行政和技術(shù)聯(lián)系人是相同的。
它還將顯示域注冊(cè)商。大多數(shù)知名的網(wǎng)絡(luò)托管公司和域名注冊(cè)商都有DMCA表格或電子郵件。您可以看到這個(gè)特定的人使用HostGator，因?yàn)樗麄兊挠蛎?wù)器。HostGator有一個(gè)DMCA投訴表格。
如果名稱服務(wù)器類似于ns1.theirdomain.com，那么您必須通過反向IP查找和搜索IP進(jìn)行更深入的挖掘。
您還可以使用DMCA.com的第三方服務(wù)進(jìn)行刪除。
Jeff Starr在他的文章中建議你應(yīng)該屏蔽壞人的IP。訪問您的日志以獲取其IP地址，然后在您的根.htaccess文件中使用以下內(nèi)容阻止它：
Deny from 123.456.789
您還可以通過執(zhí)行以下操作將它們重定向到虛擬Feed：
RewriteCond %{REMOTE_ADDR} 123\.456\.789\.
RewriteRule .* http://dummyfeed.com/feed [R,L]
正如Jeff建議的那樣，您可以在這里獲得真正的創(chuàng)意。將它們發(fā)送到包含Lorem Ipsum的非常大的文本提要。你可以給他們發(fā)送一些惡心的壞事圖片。您還可以將它們直接發(fā)送回他們自己的服務(wù)器，從而導(dǎo)致無限循環(huán)，從而使他們的網(wǎng)站崩潰。
我們采取的最后一種方法是利用它們。
如何利用內(nèi)容抓取工具
這是我們處理內(nèi)容抓取工具的方法，結(jié)果非常好。它有助于我們的SEO以及幫助我??們賺取額外收入。
大多數(shù)抓取工具使用您的RSS Feed來采集您的內(nèi)容。所以這些是你可以做的一些事情：
- 內(nèi)部鏈接– 您需要大量鏈接您的博客文章。當(dāng)您的文章中有內(nèi)部鏈接時(shí)，它可以幫助您增加瀏覽量并降低您自己網(wǎng)站的跳出率。其次，它可以從采集您內(nèi)容的人那里獲得反向鏈接。最后，它允許您采集他們的觀眾。如果您是一位才華橫溢的博主，那么您就會(huì)了解內(nèi)部鏈接的藝術(shù)。您必須將鏈接放在有趣的關(guān)鍵字上。讓用戶很容易點(diǎn)擊它。如果你這樣做，那么刮板的觀眾也會(huì)點(diǎn)擊它。就像那樣，你從他們的網(wǎng)站上帶走了一個(gè)訪問者，然后把他們帶回了他們本來應(yīng)該去的地方。
- 使用附屬鏈接自動(dòng)鏈接關(guān)鍵字– 很少有像ThirstyAffiliates這樣的插件會(huì)自動(dòng)用附屬鏈接替換指定的關(guān)鍵字，
- 使用RSS頁(yè)腳發(fā)揮創(chuàng)意– 您可以使用多合一SEO插件將自定義項(xiàng)目添加到您的RSS頁(yè)腳。您可以在此處添加任何您想要的內(nèi)容。我們知道有些人喜歡向他們的 RSS 閱讀器宣傳他們自己的產(chǎn)品。所以他們會(huì)添加橫幅。你猜怎么著，現(xiàn)在這些橫幅也將出現(xiàn)在這些刮刀的網(wǎng)站上。在我們的案例中，我們總是在RSS Feed中的文章底部添加一點(diǎn)免責(zé)聲明。通過這樣做，我們從“他們”的網(wǎng)站獲得原始文章的反向鏈接，讓谷歌和其他搜索引擎知道我們是權(quán)威的。它還讓他們的用戶知道該網(wǎng)站正在采集我們的內(nèi)容。
查看我們的指南，了解如何在WordPress中控制您的RSS Feed頁(yè)腳以獲取更多提示和想法。
如何減少和防止WordPress博客抓取
考慮到如果您采用我們的大量?jī)?nèi)部鏈接方法、添加附屬鏈接、RSS橫幅等，您將有可能將內(nèi)容抓取減少到很好的程度。如果您采納Jeff Starr的重定向內(nèi)容抓取工具的建議，那也將阻止這些抓取工具。除了我們上面分享的內(nèi)容之外，您還可以使用其他一些技巧。
完整與摘要RSS Feed
博客社區(qū)一直在爭(zhēng)論是否有完整的RSS Feed或摘要RSS Feed。我們不會(huì)詳細(xì)討論該辯論，但是擁有僅摘要RSS Feed的優(yōu)點(diǎn)之一是您可以防止內(nèi)容抓取。
您可以通過轉(zhuǎn)到WordPress管理后臺(tái)并轉(zhuǎn)到設(shè)置 ? 閱讀來更改設(shè)置。然后更改設(shè)置對(duì)于feed中的每篇文章，包含全文或者摘要。
引用垃圾評(píng)論
Trackbacks和Pingbacks肯定有很大的用處，但是，它們現(xiàn)在經(jīng)常被濫用。
主題通常會(huì)在評(píng)論下方或評(píng)論中顯示引用和pingback。這使垃圾郵件發(fā)送者有動(dòng)力抓取您的網(wǎng)站并發(fā)送引用。如果您錯(cuò)誤地批準(zhǔn)了它，那么他們會(huì)得到一個(gè)反向鏈接并從您的網(wǎng)站上提及。當(dāng)然，您可以在所有文章中禁用引用。
采集內(nèi)容是否有效
有可能。如果您看到來自爬蟲站點(diǎn)的大量流量，那么它可以。
然而，在大多數(shù)情況下，事實(shí)并非如此。您應(yīng)該始終嘗試刪除您的內(nèi)容。但是您會(huì)意識(shí)到隨著您的博客變大，幾乎不可能跟蹤所有內(nèi)容抓取工具。國(guó)外網(wǎng)站博主會(huì)發(fā)出DMCA投訴，但是一般情況下，大部分博主知道還有很多其他網(wǎng)站在采集他們的內(nèi)容，只是他們無暇顧及。
我們希望本教程能幫助您防止WordPress內(nèi)容被采集抓取。您可能還想了解如何實(shí)現(xiàn)WordPress圖片被盜鏈，及通過蜘蛛統(tǒng)計(jì)分析插件攔截不需要的爬蟲。
網(wǎng)頁(yè)名稱：如何防止別人采集抓取您的WordPress內(nèi)容
轉(zhuǎn)載來于：http://m.5511xx.com/article/cdjpdis.html
