ʹÓôËÒ³Ãæ¿É±à¼ËùÑ¡ÎĵµµÄ³£¹æÉèÖã¬ÀýÈçÃû³Æ¡¢ËµÃ÷ºÍÊôÐÔ¡£
ÔÚ“Ò»°ãÎĵµÊôÐÔ”ÖУº
ÔÚÃû³ÆÎı¾¿òÖмüÈëÎĵµÃû³Æ¡£
ÔÚ˵Ã÷Îı¾¿òÖмüÈë˵Ã÷¡£
ËäÈ»¿ÉÒÔ¸ü¸Ä Crawler ±ê¼ÇÎı¾¿òÖеÄÎı¾£¬µ«Ò»°ãÇé¿öϲ»ÐèÒªÕâÑù×ö¡£´Ë±ê¼ÇÀ´×Ôµ¼ÈëÎĵµµÄ Crawler¡£ÃÅ»§¹ÜÀíÔ±¿ÉÔÚ Crawler ÉèÖÃÖж¨Öƴ˱ê¼Ç¡£
´Ë²¿·ÖÖл¹ÏÔʾÁËÓйØÎĵµµÄ²»¿É±à¼Í³¼ÆÐÅÏ¢£º
Àà ID¡£´ú±í¶ÔÏóÀàÐÍ (±¾ÀýΪÎĵµ) µÄ ID¡£
¶ÔÏó ID¡£ÔÚ´ËÃÅ»§Öдú±í¸Ã¶ÔÏóµÄ ID¡£
UUID¡£´ú±í¸Ã¶ÔÏóµÄͨÓÃΨһ ID¡£´Ë ID ²»½ö¶Ô´ËÃÅ»§ÊÇΨһµÄ£¬¶øÇҶԸöÔÏóÒÆÖ²µ½µÄÈκÎÆäËûÃÅ»§Ò²¶¼ÊÇΨһµÄ¡£
¶ÔÏó´´½¨Ê±¼ä¡£¸ÃÎĵµ´´½¨µÄÈÕÆÚºÍʱ¼ä¡£
¶ÔÏóÉÏ´ÎÐÞ¸Äʱ¼ä¡£×îºó±à¼²¢±£´æ¸ÃÎĵµµÄÈÕÆÚºÍʱ¼ä¡£
“´ò¿ªÎĵµ”URL¡£¿Éµ¥»÷µÄÎĵµÁ´½Ó¡£
ÄÚÈÝÀàÐÍ ID¡£ÓëÎĵµ¹ØÁªµÄÄÚÈÝÀàÐ굀 ID¡£
ÔÚ“ÎĵµÄÚÈÝÓïÑÔ”ÖУ¬Ñ¡ÔñÎĵµË÷ÒýËùÒÀ¾ÝµÄÓïÑÔ¡£ËÑË÷ÒýÇæÔÚËÑË÷ʱ»áʹÓøÃÓïÑÔ¡£
ÔÚ“¶¨ÖÆÎĵµÊôÐÔ”ÖУ¬¿ÉÒÔÐÞ¸ÄËùÑ¡ÎĵµµÄÊôÐÔ¡£ÎĵµÊôÐÔÊÇËÑË÷ÒýÇæÓÃÀ´Ë÷ÒýÎĵµµÄÎĵµÏà¹ØÔªÊý¾Ý£¬ÀàËÆÓÚͼÊé¹Ý×ÊÁÏ¿¨Ä¿Â¼¡£
ÒªÌí¼ÓÊôÐÔ£¬Çëµ¥»÷ 
Ìí¼ÓÊôÐÔ¡£ÕâÑù»á½«ÊôÐÔÌí¼Óµ½Áбíµ×²¿¡£´ÓÏÂÀÁбíÖÐÑ¡ÔñËùÐèÊôÐÔ£¬È»ºóÊäÈëÒ»¸öÖµ¡£
Òª´´½¨ÊôÐÔ£¬Çëµ¥»÷ 
´´½¨ÊôÐÔ¡£ÕâʹÄú¿ÉÒÔ´´½¨ÒÔÇ°ÔÚÃÅ»§Öв»¿ÉÓõÄÐÂÊôÐÔ¡£Óйش´½¨ÊôÐÔµÄÏêϸÐÅÏ¢£¬Çë²ÎÔÄÖ÷ÒªÉèÖà (ÊôÐÔ)¡£
Ҫɾ³ýÊôÐÔ£¬ÇëÑ¡ÔñҪɾ³ýµÄÊôÐÔ£¬È»ºóµ¥»÷ 
¡£
Òª¸ü¸ÄÊôÐÔÖµ£¬ÇëÐÞ¸ÄÊôÐԵēֵ”ÁС£
ÒªÇл»ÁбíÄÚÊôÐÔµÄ×ÖĸÅÅÁÐ˳Ðò (ÉýÐòºÍ½µÐò)£¬Çëµ¥»÷ÊôÐÔ¡£
ÔÚ“ÎĵµÐÅÏ¢”ÖУ¬¿ÉÒԲ鿴ÓйØÎĵµµÄ²»¿É±à¼Í³¼ÆÐÅÏ¢£º
ÉϴηÃÎÊÃÅ»§µÄʱ¼ä£ºÓû§Éϴε¥»÷´ËÁ´½ÓµÄÈÕÆÚºÍʱ¼ä¡£
¸ü¶àÀàËÆÎĵµ£º°üº¬´ËÁ´½ÓµÄËùÓÐÃÅ»§Îļþ¼Ð¡£
·ÃÎÊ´ÎÊý£ºµ¥»÷´ËÁ´½ÓµÄ´ÎÊý¡£´Ëͳ¼ÆÐÅÏ¢¶¨ÆÚ¸üжø·ÇÁ¬Ðø¸üС£Òò´Ë£¬Ëü¿ÉÄܲ¢²»ÊÇ×îÐÂÊý¾Ý¡£
ÆÕ¼°ÂʼÆÊý£º´ÓÃÅ»§·ÃÎÊ´ËÎĵµµÄ²»Í¬Óû§µÄÊýÁ¿¡£´Ëͳ¼ÆÐÅÏ¢¶¨ÆÚ¸üжø·ÇÁ¬Ðø¸üС£Òò´Ë£¬Ëü¿ÉÄܲ¢²»ÊÇ×îÐÂÊý¾Ý¡£ÁíÍ⣬Èç¹ûÎĵµÔªÊý¾ÝÒѹýÆÚ£¬ÆäÆÕ¼°ÂʼÆÊý»áÊܵ½Ó°Ïì¡£
ÔÚ“¶¥¼¶×î¼ÑËÑË÷½á¹û”ÖУ¬¿ÉÒÔ¿´µ½ÔÚ½á¹û¶¥²¿·µ»Ø´ËÎĵµµÄÈ«²¿ËÑË÷´Ê (×î¼ÑËÑË÷½á¹ûÓÉÃÅ»§¹ÜÀíÔ±À´ÉèÖÃ)¡£ÓйØ×î¼ÑËÑË÷½á¹ûµÄÏêϸÐÅÏ¢£¬Çë²ÎÔÄ×î¼ÑËÑË÷½á¹ûºÍ¶¥¼¶×î¼ÑËÑË÷½á¹û¡£
ÒªÁ´½Óµ½´Ë¶ÔÏóµÄ×îÖÕÓû§ÊÓͼ£¬Çëµ¥»÷ URL ϵÄÁ´½Ó¡£Óû§¿Éͨ¹ý´Ë URL Ö±½Óתµ½¸Ã¶ÔÏó¡£
ÒªÌí¼Ó¶¥¼¶×î¼ÑËÑË÷½á¹û£¬ÇëʹÓÃËÑË÷½á¹û¹ÜÀíÆ÷ÖеÄ×î¼ÑËÑË÷½á¹û±à¼Æ÷¡£
ÒªÏÔʾÓë´Ë°ïÖúÖ÷ÌâÏà¹ØÁªµÄÒ³Ã棬ÇëÖ´ÐÐÒÔϲÙ×÷£º
±à¼Ä¿Â¼¡£
¡£