怎样预防网站万能信息采集器及吸血鬼等软件搜取自己网站上的数据
\u600e\u6837\u9884\u9632\u300a\u7f51\u7ad9\u4e07\u80fd\u4fe1\u606f\u91c7\u96c6\u5668\u300b \u53ca\u5438\u8840\u9b3c\u7b49\u8f6f\u4ef6\u641c\u53d6\u81ea\u5df1\u7f51\u7ad9\u4e0a\u7684\u6570\u636e\u52a0\u5bc6\u7f51\u7ad9!
\u6ca1\u7528\u8fc7\u90a3\u73a9\u610f\uff0c\u91c7\u96c6\u7f51\u7ad9\u4fe1\u606f\uff0c\u6700\u76f4\u63a5\u6700\u7ba1\u7528\u7684\u65b9\u6cd5\u5c31\u662f\u67e5\u770b\u6e90\u4ee3\u7801\uff0c\u641c\u7d22\u4f60\u8981\u7684\u6587\u4ef6\u540e\u7f00\uff0c\u5f88\u5feb\u5c31\u80fd\u627e\u5230\u3002
防采集的一些思路的探讨1、用不同的模板
对于用程序的网站来说，不大可行，一个网站的模板最多也就几套吧。
2、使用robots禁止访问网页目录
这个方法可以有效的防止采集，不过将搜索引擎也封掉了，对于靠搜索引擎吃饭的站长们来说，得不偿失。
一个例子，Disallow 后面就是禁止访问的目录：
User-agent: *
Disallow: /admin
Disallow: /attachments
Disallow: /images
Disallow: /forumdata
Disallow: /include
3、使用HTTP_REFERER禁止采集，发现来自非本站连接就禁止察看叶面，就像前一段落伍im286.net防DDOS那个禁止调用一样。
这个方法可以比较有效的防止采集，不过也一样把搜索引擎封掉了，对于靠搜索引擎吃饭的站长们来说，得不偿失。
对高手无效，因为HTTP_REFERER可以伪造。但对一般使用采集的人来说，已经足够应付了。
例：
php
if(preg_replace("/https?://([^/]+).*/i", "1", $HTTP_SERVER_VARS['HTTP_REFERER']) != $HTTP_SERVER_VARS['HTTP_HOST']) {
exit('警告----你的操作已经被禁止。http://www.ic98.com');
}
4、使用HTTP_REFERER伪造内容
这个方法可以比较有效的防止采集，不过对于搜索引擎来说，查到的东西跟你伪造的东西一样的，可能会影响收录。(如有不对，请高手指出)
同上，对于高手无效。
5、使用java加密内容。
这个可能会比较有效，但是我对java一窍不通，也就不清楚如何入手了。
但我想，既然你这样使得别人采集到乱码，搜索引擎有可能也是收录到乱码的(我不清楚搜索引擎怎么工作，不过我猜测他们是察看网页源代码的。)，也就影响收录。
6、使用java加密网址
同上，有可能让搜索引擎无法搜索到你的网页。
7、生成pdf文件、生成图片
这个方法可以比较有效的防止采集，不过照样让搜索引擎望而却止。
8、加上自己的版权信息
这个方法最大的好处就是不影响搜索引擎，效果马马虎虎，一般上可以让采集者采集到带有自己版权的稿件内容。但是对于可以过滤广告的采集程序来说，不大有效。
以下是作者给俺的PM:
Quote:
你的版权是不是加了你的网站和网址?
只要把网址和网站名替换成他的就可以了啊.这样还让他有了版权功能呢.
反正防采真是头疼....
有点麻烦，我的思路是将网站名称分成一个一个字来显示，他不可能将每个字都替换掉吧？不过要这样我就没办法了。比如说我将我的 武侠网 拆开，分成
武侠网
，$rand_color*是随机颜色，可以自己控制的，如果是动态网页的话，还配合HTTP_REFERER来搞随机，这样子随机性就更大了。一般上，尽量制造难度就是了。模板也可以制造随机性，几个相似的模板轮流来弄，这样子让人采集的难度更大。
不过说实话，要使他们真要搞，那是没办法的事，不过至少要花他们很多的时间去研究。在此之前，他们可能没耐性转向别的站了。
另外，最好不要让人知道你使用随机函数。一般人只是稍微看一下网页代码，就开始采集了。
其实俺地网站也喜欢采集别家的东东,我感觉只要是好的东东,就应该大家一起分享嘛,要真是机密数据,那就最好在每个页面上加随机密码了,但这样也会使搜索引擎找不到你的,得不偿失呀
绛旓細DM瀹為獙瀹ゆ帹鍑轰簡涓娆惧悕涓篋M瑙嗛噰閲囬泦鍣鐨缃戠珯鏁版嵁鎶撳彇杞欢銆傝繖娆剧郴缁熷嚟鍊熷叾鍏堣繘鐨勭綉椤电粨鏋勭壒寰佽瘑鍒拰鏍锋湰鑷姩瀛︿範鎶鏈紝鎴愬姛瑙ｅ喅浜嗗綋鍓嶆暟鎹娊鍙栬繃绋嬩腑閬囧埌鐨勫鏉傞毦棰樸侱M瑙嗛噰閲囬泦鍣ㄧ殑鏍稿績鎶鏈寒鐐瑰寘鎷細1. 鍙鍖栫敤鎴蜂綋楠岋細鏁版嵁浠ュ浘鍍忋佹洸绾裤佷簩缁/涓夌淮鍥惧舰鍙婂姩鐢荤殑褰㈠紡灞曠幇锛屼娇寰楁ā寮忚瘑鍒拰鍏崇郴鍒嗘瀽鍙樺緱鏇村姞鐩磋...
绛旓細鍋缃戠珯鐨勯亾鐞嗘槸涓鏍风殑锛屾垜浠渶瑕佺患鍚堝悇绫淇℃伅锛岃繘琛屽垎鏋愭荤粨锛屾壘鍑洪傚悎鑷繁鐨勫彂灞曟柟鍚戯紝棰勬祴鏈缁堢殑鐩爣锛岃繖閲屼篃闇瑕佷竴绉嶇敾澶чゼ鐨勭簿绁烇紝鎴戜滑寰堝绔欓暱鍋氱珯鐨勮繃绋嬩腑寰堝亸绂诲彂灞曠殑鍙戠幇锛屾湰韬槸鍋氳酱鎵跨殑缃戠珯锛屽亸鍋忚鏀句笂MM鍥剧墖锛屽涓斾笉璁哄奖鍝嶅浣曪紝鍗曞崟灏辨悳绱㈠紩鎿庢潵璇达紝閭ｅ氨鏄ぇ蹇屻傛墍浠ュ畾濂戒簡鐩爣灏辨寜鐓ц繖涓柟鍚...
绛旓細鎸塅12鎵撳紑娴忚鍣ㄧ殑寮鍙戣呭伐鍏枫 鍦"Elements"鏍囩涓嬶紝鎵惧埌"name"鍒楋紝鍙抽敭鐐瑰嚮閫夋嫨"Copy"锛岄夋嫨"Copy Link Address"銆 纭繚澶嶅埗鐨勬槸涓嶦绔欑綉椤靛搴旂殑cookie閾炬帴銆 鍦ㄦ柊绐楀彛涓煡鐪媍ookie锛屾壘鍒板寘鍚处鍙淇℃伅鐨勯儴鍒嗐傜櫥褰旹绔欑殑鍘熺悊鏄缃戠珯閫氳繃楠岃瘉cookie鏉ョ‘璁ょ敤鎴疯韩浠姐傚湪鏁版嵁閲囬泦杩囩▼涓紝闇瑕佺‘淇濅綘鐨勫伐鍏...
绛旓細涓嶆柇妫楠岋紝鍔涙眰鎶婅宸噺灏戝埌鏈浣庨檺搴︺傚簲鍏ㄩ潰鐨勮冭檻闂锛氳姹傛墍鎼滈泦鍒扮殑淇℃伅瑕佸箍娉涳紝鍏ㄩ潰瀹屾暣銆傚彧鏈夊箍娉涖佸叏闈㈠湴鎼滈泦淇℃伅锛屾墠鑳藉畬鏁村湴鍙嶆槧绠＄悊娲诲姩鍜屽喅绛栧璞″彂灞曠殑鍏ㄨ矊锛屼负鍐崇瓥鐨勭瀛︽ф彁渚涗繚闅溿傚洜姝わ紝濡備綍鍦ㄤ笉瀹屾暣銆佷笉瀹屽鐨勪俊鎭笅鍋氬嚭绉戝鐨勫喅绛栧氨鏄竴涓潪甯稿煎緱鎺㈣鐨勯棶棰樸
绛旓細涓轰簡鏇村ソ鍦板洖绛旇繖涓棶棰,鎴戝皢甯傚満璋冩煡銆佽惀閿淇℃伅缁熺О钀ラ攢淇℃伅閲囬泦绯荤粺,鍒嗕负鍐呴儴鎶ュ憡绯荤粺鍜屽閮ㄦ儏鎶ユ敹闆嗙郴缁熶袱閮ㄤ唤銆 涓銆 鍐呴儴鎶ュ憡銆傚寘鎷鎴疯鍗;閿鍞娴嬭〃;閿鍞眹鎬绘姤琛(鏈堛佸鍒嗗湴鍖);閿鍞环鏍兼按骞宠〃;瀛樿揣缁熻琛;搴旀敹甯愭缁熻琛ㄣ 瀹㈡埛璁㈠崟瑕佹寜鐓ц涓氥佸湴鍖恒佷氦璐ф湡銆佷骇鍝佽鏍艰繘琛屽綊绫;閿鍞骇鍝侀娴嬭〃瑕佸垎浜у搧绉嶇被...
绛旓細涓冦缃戠珯缁存姢 1銆佹湇鍔鍣ㄥ強鐩稿叧杞‖浠剁殑缁存姢锛屽鍙兘鍑虹幇鐨勯棶棰樿繘琛岃瘎浼帮紝鍒跺畾鍝嶅簲鏃堕棿銆2銆佹暟鎹簱缁存姢锛屾湁鏁堝湴鍒╃敤鏁版嵁鏄綉绔欑淮鎶ょ殑閲嶈鍐呭锛屽洜姝ゆ暟鎹簱鐨勭淮鎶よ鍙楀埌閲嶈銆3銆佸唴瀹圭殑鏇存柊銆佽皟鏁寸瓑銆4銆佸埗瀹氱浉鍏崇綉绔欑淮鎶ょ殑瑙勫畾锛屽皢缃戠珯缁存姢鍒跺害鍖栥佽鑼冨寲銆5銆佽鏄庯細鍔ㄦ淇℃伅鐨勭淮鎶ら氬父鐢变紒涓氬畨鎺掔浉搴斾汉鍛...
绛旓細5)鎶楀共鎵版:闃叉鍣煶銆佸共鎵板鏁版嵁浼犺緭褰卞搷鐨勮兘鍔涖 6)鐩稿浠锋牸:浠ュ厓浠躲佸畨瑁呭拰缁存姢鐨勪环鏍间负鍩虹銆2銆佸父鐢ㄧ殑浼犺緭濯掍綋鍙岀粸绾 鏀惰灪鏃嬫壄鍦ㄤ竴璧风殑涓ゆ牴缁濈紭瀵肩嚎缁勬垚銆傜嚎瀵规壄鍦ㄤ竴璧峰彲浠ュ噺灏戠浉浜掗棿鐨勮緪灏勭數纾佸共鎵,鍙岀粸绾挎棭灏辩敤鍦ㄧ數璇濋氫俊涓ā鎷熶俊鍙风殑浼犺緭,涔熷彲鐢ㄤ簬鏁版嵁淇″彿鐨勪紶杈,鏄渶甯哥敤鐨勪紶杈撳獟浣撱傚弻缁炵嚎 (1)鐗╃悊鐗...
绛旓細闊抽璧勬簮涓昏闆嗕腑鍦ㄩ煶涔愮被缃戠珯锛屽DJ鑸炴洸绔欏拰闊充箰鍒嗕韩绔欙紝瀹冧滑閫氬父浼氭惌閰嶅浘鐗囧拰鏂囧瓧浠嬬粛銆傝棰戣祫婧愭槸鍏朵腑鏈涓板瘜鍜屽鏉傜殑绫诲瀷锛岄氬父鍖呭惈鍥剧墖銆佹枃瀛淇℃伅浠ュ強瑙嗛鏈韩锛岀敤浜庨槓杩板拰灞曠ず銆傚奖瑙嗙珯鍜屽姩婕珯鏄繖绫昏祫婧愮殑閲嶈搴旂敤锛屽畠浠埄鐢ㄨ棰戝惛寮曡浼椼傚浠婏紝闅忕潃浜掕仈缃戜笂鎾斁鍣ㄧ殑澶氭牱鍖栵紝瑙嗛璧勬簮鐨勭绫荤箒澶氾紝濡傜櫨搴...
绛旓細鏁版嵁閲囬泦鍣鐨勯夋嫨鍝鏇寸粡娴庡疄鎯狅紵鍥藉唴鐭ュ悕鐨勯夋嫨鏈変笢澶ч泦鎴愶紝涓嶅Θ鑰冭檻涓涓嬨備粬浠敮鎸佸绉嶆暟鎹噰闆嗘柟寮忥紝鍖呮嫭涓缁村拰浜岀淮鐮佹壂鎻忋丷FID灏勯璇嗗埆銆佽秴楂橀UHF銆丯FC璇诲彇浠ュ強GPS銆傝澶囬厤澶囦簡4G鍜5G鍙岄楂橀焀IFI銆4000mAh閿傜瀛愮數姹狅紝缁埅鑳藉姏杈惧埌12灏忔椂銆傚湪宸ヤ笟鏁版嵁閲囬泦棰嗗煙锛孨I锛堢編鍥藉浗瀹朵华鍣級鏄涓氶瀵艰咃紝鍦ㄤ腑鍥...
绛旓細涓汉鎰熻鍏埅楸閲囬泦鍣杩欐杞欢瀹炵敤鎬ц繕鏄潪甯稿ぇ鐨勶紝瀹冪殑鎿嶄綔闈炲父绠鍗曪紝鑳藉妯℃嫙浜烘祻瑙堢綉椤电殑鎿嶄綔锛屽彲浠ラ氳繃杈撳叆鏂囧瓧銆佺偣鍑诲厓绱犵瓑涓浜涚畝鍗曠殑鎿嶄綔锛屽湪浣跨敤鐨勯斾腑涔熸棤闇缂栧啓浠ｇ爜锛屾尯鏂逛究鐨勩
