¡¡¡¡¶È¶ÔÐÂÕ¾µÄÊÕ¼³Ù³Ù²»Ôö¼Ó¿ÉÄÜÊÇÓкܶàÔÒòµ¼ÖµÄÏȽ«ÔÒòÒ»Ò»Àý³ö£¬ÔÙÀ´·ÖÎöÆäÕûÌå½â¾ö·½·¨¡£
1¡¢Ñ¡ÔñÕýÈ·Õý¹æµÄÓòÃû£¬²éÒ»ÏÂÓòÃûÔø¾µÄ½¨Õ¾ÀúÊ·£¬»¥ÁªÍø»·¾³ÖÐÓÐûÓÐÁôϲ»ºÃµÄÓ°Ï죬Èç¹ûÓÐ×îºÃ²»Òª×öºÍÒÔÇ°ÍøÕ¾ÏàͬÄÚÈݵÄÍøÕ¾¡£
2¡¢×¥È¡ÉèÖã¬robots.txtÎļþÉèÖÃÊÇ·ñÕýÈ·£¬·ñÆÁ±ÎÁËÖ©ÖëµÄץȡ£¬Õâ¸öÎÊÌâºÜÈÝÒ×±»ºöÂÔ£¬×îºÃ¼ì²éÒ»ÏÂ×Ô¼ºµÄrobots.txtÎļþ¡£
3¡¢ÍøÕ¾ÄÚÈÝÊÇÒ»¸öÍøÕ¾µÄ¸ù±¾£¬¾ö¶¨ÁËÍøÕ¾ÖÊÁ¿µÄ¸ßµÍ£¬ÍøÕ¾ÄÚÈÝÊÇ·ñÓÅÖʲ¢ÓëÖÚ²»Í¬£¬Ã¿¸öÕ¾³¤¶¼ÐèҪ˼¿¼Õâ¸öÎÊÌâ¡£
4¡¢ÍøÕ¾ÍâÁ´½¨ÉèÇé¿ö£¬ÐÂվÿÌì×îºÃ¶¨Á¿½¨É裬²»ÒªÒ»´ÎÐÔÌí¼Ó¹ý¶àÍâÁ´£¬È»ºóÓÖ¼¸Ì첻ȥ¹ÜÀí¡£
5¡¢°Ù¶ÈÕ¾³¤Æ½Ì¨ÒѾ½øÐÐÁËץȡ£¬Ö»ÊÇĿǰ»¹Ã»ÓаÑÄÚÈÝÊͷŽøÈ¥¡£
6¡¢¿Õ¼äÎȶ¨ÐÔÒ²ÊÇÒ»¸öÖÁ¹ØÖØÒªµÄÎÊÌ⣬Èç¹ûÍøÕ¾×ÜÊÇÎÞ·¨·ÃÎÊ£¬´Î´ÎÈÃÖ©ÖëÅö±Ú£¬ÄÇô֩ÖëÒ²²»Ô¸ÒâÔÙÀ´ÍøÕ¾½øÐÐץȡ³¢ÊÔ¡£
7¡¢¶ÀÁ¢IPÊ컰˵ÈËÓëÀà¾Û£¬ÎïÓëȺ·Ö£¬¹²ÏíµÄipÍøÕ¾¾ÍÏñͬ°éÒ»Ñù£¬»á½øÈëËÑË÷ÒýÇæµÄ²Î¿¼ÐÐÁС£
¡¡¡¡Òª·ÀÖ¹ÖÚ¶àÍøÕ¾ÊÕ¼ÂýµÄÔÒò£¬»¹ÐèÒªÕ¾³¤¸ü¼ÓϸÐÄϸÖ²ÅÐС£Ê×ÏÈÔÚ°Ù¶ÈÕ¾³¤Æ½Ì¨×¢²áÒ»¸öÕË»§£¬½«ÍøÕ¾½øÐÐÈÏÖ¤£¬È»ºó¿ÉÒÔ¼ì²éË÷ÒýÁ¿ÒÔ¼°robots.txtÎļþµÄÉèÖÃÇé¿ö£¬°Ù¶ÈÕ¾³¤Æ½Ì¨»¹Äܲ鿴ÍâÁ´µÄ±ä»¯£¬ÒÔ¼°ÍøÕ¾¿Õ¼äÊÇ·ñÓÐÎÞ·¨·ÃÎʵÄÇé¿ö·¢Éú¡£
¡¡¡¡Í¨¹ýËÑË÷ÒýÇæËÑË÷ÍøÕ¾ÓòÃû£¬×Ðϸ²éÔÄÍøÕ¾ÍâÁ´Çé¿ö£¬¿´¿´Ôø¾ÊÇ·ñÓн¨Õ¾¼Ç¼£¬Ò²ÓÐһЩרҵµÄÍøÕ¾ÌṩÓòÃû½¨Õ¾ÀúÊ·²éѯ£¬¿ÉÒÔ½øÐвο¼¡£
¡¡¡¡Æäʵ¸ßÖÊÁ¿µÄÔ´´²ÅÊÇÍøÕ¾±»ÊÕ¼µÄ¹Ø¼üËùÔÚÓÅÖÊÎÄÕ¼ÓÉÏÊʵ±µÄÍâÁ´ÎüÒýÖ©ÖëÕÒµ½ÎÄÕ£¬ÄÇôÎÄÕ±»ÊÕ¼ÊdzÙÔçµÄÊ£¬seoÒ»¸ö»ýÀ۵Ĺý³Ì£¬¼á³Ö²»Ð¸µÄŬÁ¦Ê¤ÀûÖջᵽÀ´¡£