°Ë»ö¿£Áø ÃÖÀûÈÀÇ ¸ñÀû
°Ë»ö¿£Áø ÃÖÀûÈ ÀÛ¾÷Àº ¿©·¯ºÐÀÇ »çÀÌÆ® ³» ÄÜÅÙÃ÷ Á¤º¸¸¦ °Ë»ö¿£ÁøÀÌ Àß ÀÌÇØÇÒ ¼ö ÀÖµµ·Ï Á¤¸®ÇÏ´Â ÀÛ¾÷ÀÔ´Ï´Ù. ÀÌ ÀÛ¾÷À» ÅëÇÏ¿© »çÀÌÆ® ³» ÄÜÅÙÃ÷°¡ ³×À̹öÀÇ °Ë»ö °á°ú¿¡ ´©¶ôµÇÁö ¾Êµµ·Ï Á¶Ä¡ÇÒ ¼ö ÀÖÀ¸¸ç, ¹«¾ùº¸´Ù »ç¿ëÀÚ°¡ ¿øÇÏ´Â ÄÜÅÙÃ÷ÀÇ ³»¿ëÀ» ¸íÈ®ÇÏ°Ô ³×À̹ö °Ë»ö¿£Áø¿¡°Ô ¾Ë·Á ÁÙ ¼ö ÀÖ½À´Ï´Ù.
³×À̹ö °Ë»öÀº °Ë»ö¿£Áø¿¡ Ä£ÈÀûÀÎ »çÀÌÆ®¸¦ ¿ì´ëÇÕ´Ï´Ù. ¿©·¯ºÐÀÇ »çÀÌÆ®°¡ °Ë»ö¿£Áø¿¡ ÃÖÀûȵǾîÀÖ´ÂÁö º» °¡À̵带 ²Ä²ÄÈ÷ Àо°í Á¡°ËÇغ¸¼¼¿ä. ³×À̹ö °Ë»ö°ú À¥¸¶½ºÅ͵µ±¸°¡ ¿©·¯ºÐ »çÀÌÆ®ÀÇ ¹æ¹®ÀÚ À¯ÀÔÀÌ Áõ°¡µÉ ¼ö ÀÖµµ·Ï µµ¿Íµå¸®°Ú½À´Ï´Ù. ¾Æ·¡ 10°¡ÁöÀÇ ÃÖÀûÈ ¹æ¹ý È°¿ëÇÏ¿© ¿©·¯ºÐÀÇ »çÀÌÆ® ÄÜÅÙÃ÷¸¦ ³×À̹ö °Ë»ö¿¡ ¹Ý¿µÇØ º¸¼¼¿ä.
1. À¥¸¶½ºÅ͵µ±¸¿¡ »çÀÌÆ®¸¦ µî·ÏÇÏ°í ¼ÒÀ¯È®ÀÎÀ» ÁøÇàÇÕ´Ï´Ù.
»çÀÌÆ® µî·ÏÀº È£½ºÆ® ´ÜÀ§¸¸ Áö¿øÇÕ´Ï´Ù.
http://www.mysite.com (O)
http://blog.mysite.com (O)
http://www.mysite.com/myid (X)
»çÀÌÆ®ÀÇ ¼ÒÀ¯ È®ÀÎÀº HTMLÀÇ meta ű׸¦ È°¿ëÇÏ´Â ¹æ¹ý ȤÀº HTML ÆÄÀÏ ¾÷·Îµå¸¦ ÅëÇؼ ÁøÇàÇÒ ¼ö ÀÖ½À´Ï´Ù. ¸¸¾à, HTMLÀ» ¼öÁ¤ÇÒ ¼ö ÀÖ´Â ±ÇÇÑÀÌ ¾ø°Å³ª »çÀÌÆ® ³»·Î ÆÄÀÏ ¾÷·Îµå°¡ ºÒ°¡´ÉÇÏ´Ù¸é, »çÀÌÆ®ÀÇ ±â¼ú´ã´çÀÚ¿¡°Ô ¹®ÀÇÇϼ¼¿ä.
2. »çÀÌÆ®ÀÇ ¼ÒÀ¯ È®ÀÎÀÌ ºÒ°¡´ÉÇÑ °æ¿ì ¾Æ·¡ »óȲÀ» üũÇغ¸¼¼¿ä.
»çÀÌÆ®ÀÇ ¹æȺ®¿¡¼ ³×À̹ö °Ë»ö·Îº¿À» Â÷´ÜÇÏ´ÂÁö È®ÀÎÇØÁÖ¼¼¿ä.
»çÀÌÆ®ÀÇ ¸ÞÀÎ ÆäÀÌÁö°¡ ÀÚ¹Ù½ºÅ©¸³Æ® ȤÀº meta refresh ±â¹ýÀ» »ç¿ëÇÏ¿© redirect µÈ´Ù¸é Áö¿øÀÌ ºÒ°¡´ÉÇÕ´Ï´Ù. HTTP redirect ¹æ½ÄÀ» »ç¿ëÇØ ÁÖ¼¼¿ä.
frame ÅÂ±× ³»ºÎ¿¡ ¼ÒÀ¯ È®Àοë HTML ű׸¦ ³Ö¾ú´Ù¸é Áö¿øÀÌ ºÒ°¡´ÉÇÕ´Ï´Ù. frame ÅÂ±× ¿ÜºÎ·Î ¼ÒÀ¯ È®Àοë HTML ű׸¦ ±âÀÔÇØÁÖ¼¼¿ä.
¼ÒÀ¯ È®Àνà Á¦°øÇÏ´Â ¾÷·Îµå¿ë ¿øº» HTML ÆÄÀÏÀÌ ¼Õ»óµÈ °æ¿ì Áö¿øÀÌ ºÒ°¡´ÉÇÕ´Ï´Ù.
À¥¸¶½ºÅ͵µ±¸´Â ÀÎÅÍ³Ý ÀͽºÇ÷η¯ 11 ¹Ì¸¸ ¹öÀüÀ» Áö¿øÇÏÁö ¾Ê½À´Ï´Ù.
º¸´Ù ÀÚ¼¼ÇÑ ¼³¸íÀº ³×À̹ö °í°´¼¾ÅÍÀÇ »çÀÌÆ® ¼ÒÀ¯ È®ÀÎÇϱâ Ç׸ñÀ» Âü°íÇØ ÁÖ¼¼¿ä.
3. ³×À̹ö °Ë»ö·Îº¿ÀÌ »çÀÌÆ®¿¡ Á¢±ÙÇÒ ¼ö ÀÖµµ·Ï Çã¿ëÇØÁÖ¼¼¿ä
»çÀÌÆ®ÀÇ ¹®¼¿¡ ³×À̹ö °Ë»ö·Îº¿ÀÇ Á¢±ÙÀÌ °¡´ÉÇÏ°Ô ÇÏ·Á¸é robots.txt¸¦ ¾Æ·¡Ã³·³ ¼³Á¤Çϼ¼¿ä. ¸¸¾à, robots.txt¸¦ Á÷Á¢ º¯°æÇϱ⠾î·Æ´Ù¸é »çÀÌÆ® Á¦ÀÛ¾÷ü, °³¹ßÀÚ µî »çÀÌÆ®ÀÇ ±â¼ú´ã´çÀÚ µµ¿òÀÌ ÇÊ¿äÇÕ´Ï´Ù. robots.txt¿¡ ´ëÇÑ ÀÚ¼¼ÇÑ ¼³¸íÀº robots.txt ¼³Á¤Çϱ⸦ Âü°íÇϼ¼¿ä.
(¿¹) ³×À̹ö °Ë»ö·Îº¿¸¸ Á¢±Ù °¡´ÉÇÏ°Ô ¼³Á¤
User-agent: Yeti
Allow: /
(¿¹) ¸ðµç °Ë»ö¿£ÁøÀÇ ·Îº¿¿¡ ´ëÇÏ¿© Á¢±Ù °¡´ÉÇÏ°Ô ¼³Á¤
User-agent: *
Allow: /
¿©·¯ºÐÀÇ À¥ ¼¹ö ȤÀº ¹æȺ®¿¡¼ ³×À̹ö °Ë»ö·Îº¿ÀÇ Á¢±ÙÀ» Çã¿ëÇØÁÖ¼¼¿ä. ³×À̹ö °Ë»ö·Îº¿ÀÇ À̸§(User-Agent)Àº Yeti ÀÔ´Ï´Ù.
Mozilla/5.0 (compatible; Yeti/1.1; +http://naver.me/spd)
ºÎµæÀÌÇÏ°Ô °Ë»ö ·Îº¿À» Â÷´ÜÇØ¾ß ÇÏ´Â °æ¿ì IP ±â¹ÝÀ¸·Î Â÷´ÜÇÏÁö ¸¶¼¼¿ä. °Ë»ö ·Îº¿ÀÇ IP ´ë¿ªÀº ¾ðÁ¦µçÁö º¯°æµÉ ¼ö ÀÖ½À´Ï´Ù. °Ë»ö ·Îº¿ÀÇ Á¢±Ù Á¦¾î´Â Ç¥ÁØÀûÀÎ ¹æ½ÄÀÎ robots.txt¸¦ È°¿ëÇÏ´Â °ÍÀ» ±ÇÀåÇÕ´Ï´Ù. ³×À̹ö °Ë»ö·Îº¿ÀÇ IP ´ë¿ª ¹× À̸§À» È®ÀÎÇÏ´Â ¹æ¹ýÀº °Ë»ö·Îº¿ È®ÀÎ ¹æ¹ý °¡À̵带 Âü°íÇϼ¼¿ä.
4. Áߺ¹µÈ ÄÜÅÙÃ÷°¡ ÀÖ´ÂÁö È®ÀÎÇØ ÁÖ¼¼¿ä.
°Ë»ö ³ëÃâ·®À» ´ÃÀ̱â À§ÇÏ¿© µ¿ÀÏÇÑ ÄÜÅÙÃ÷·Î ±¸¼ºµÈ ¿©·¯ °³ÀÇ »çÀÌÆ®¸¦ °³¼³ÇÏ´Â °æ¿ì°¡ ÀÖ½À´Ï´Ù. ÀÌ °æ¿ì °Ë»ö ³ëÃâ¿¡ ºÒÀÌÀÍÀ» ¹ÞÀ» ¼ö ÀÖÀ¸´Ï À¯ÀÇÇϼ¼¿ä.
¸ðµç ÆäÀÌÁöÀÇ Á¦¸ñÀ» µ¿ÀÏÇÏ°Ô Ç¥ÇöÇÏÁö ¸¶¼¼¿ä. ÆäÀÌÁöÀÇ Á¦¸ñÀº ÄÜÅÙÃ÷ ÁÖÁ¦¸¦ Á¤È®ÇÏ°Ô ¼³¸íÇÒ ¼ö ÀÖ´Â ¹®±¸¸¦ Àû¾î¾ß ÇÕ´Ï´Ù. ÀÚ¼¼ÇÑ ³»¿ëÀº HTML ¸¶Å©¾÷ °¡À̵带 Âü°íÇϼ¼¿ä.
5. À¥¸¶½ºÅ͵µ±¸¿¡ »çÀÌÆ®¸Ê ¹× RSS¸¦ Á¦ÃâÇØÁÖ¼¼¿ä.
»çÀÌÆ®¸ÊÀº »çÀÌÆ® ³»ÀÇ ¼öÁý ´ë»ó URL ¸ñ·ÏÀ» ´ãÀº XML Çü½ÄÀÇ ÆÄÀÏÀÔ´Ï´Ù. À¥¸¶½ºÅ͵µ±¸ÀÇ "¿äû-»çÀÌÆ®¸Ê Á¦Ãâ" ¸Þ´º¿¡¼ XML Çü½ÄÀÇ »çÀÌÆ®¸ÊÀ» Á¦ÃâÇÏ¸é µË´Ï´Ù.
»çÀÌÆ® ³»ÀÇ ÃֽűÛÀº º»¹® Àüü¸¦ Æ÷ÇÔÇÏ¿© RSS Çǵ忡 ´ã¾ÆÁÖ¼¼¿ä. À¥¸¶½ºÅ͵µ±¸ÀÇ "¿äû-RSS Á¦Ãâ" ¸Þ´º¿¡¼ RSS Çǵ带 Á¦ÃâÇÏ¸é µË´Ï´Ù.
ÀÚ¼¼ÇÑ ³»¿ëÀº RSS ¹× »çÀÌÆ®¸Ê Á¦Ãâ °¡À̵带 Âü°íÇϼ¼¿ä.
6. À¥¸¶½ºÅ͵µ±¸¿¡ ä³ÎÀ» µî·ÏÇØÁÖ¼¼¿ä.
ä³ÎÀº ³×À̹ö ºí·Î±×, Ä«Æä, ÆäÀ̽ººÏ, ÀνºÅ¸±×·¥ µî º»ÀÎÀÌ ¿î¿µÇÏ°í ÀÖ´Â ¼Ò¼È ¹Ìµð¾îÀÇ °èÁ¤º° ÆäÀÌÁöÀÔ´Ï´Ù. ¿©·¯ºÐÀÇ ¿Â¶óÀÎ ºê·£µù¿¡ È°¿ëÇϴ ä³Î Á¤º¸¸¦ Á¦ÃâÇØÁÖ¼¼¿ä.
7. ³×À̹ö °Ë»ö °á°ú¸¦ È®ÀÎÇÕ´Ï´Ù.
³×À̹öÀÇ °Ë»ö·Îº¿ÀÌ ¹æ¹®ÇÑ µÚ ÃÖ´ë 1ÁÖÀÏ À̳»¿¡ »çÀÌÆ®ÀÇ ÄÜÅÙÃ÷°¡ °Ë»ö¿¡ ¹Ý¿µµË´Ï´Ù. ³×À̹ö °Ë»öâ¿¡ »çÀÌÆ®¸íÀ» ÀÔ·ÂÇØ º¸¼¼¿ä. ¶ÇÇÑ, À¥¹®¼ °Ë»ö¿¡¼ site: ÁúÀǸ¦ È°¿ëÇϸé ƯÁ¤ »çÀÌÆ®ÀÇ ÄÜÅÙÃ÷ °Ë»ö ¹Ý¿µ ¿©ºÎ¸¦ È®ÀÎÇÒ ¼ö ÀÖ½À´Ï´Ù.
¿¹) site:www.mysite.com
À¥¸¶½ºÅ͵µ±¸¿¡¼ Á¦°øÇÏ´Â ÄÜÅÙÃ÷ ³ëÃâ ¹× Å¬¸¯ ¸®Æ÷Æ®¸¦ È°¿ëÇÏ¿© º»ÀÎÀÌ µî·ÏÇÑ À¥»çÀÌÆ®°¡ ³×À̹ö °Ë»ö °á°ú¿¡ ¾ó¸¶³ª ³ëÃâµÇ°í Ŭ¸¯ µÇ¾ú´ÂÁö ¼º°ú¸¦ È®ÀÎÇغ¸¼¼¿ä.
8. »çÀÌÆ®ÀÇ ¸ÞÀÎ ÆäÀÌÁö°¡ °Ë»ö ³ëÃâÀÌ ¾ÈµÇ´Â °æ¿ì
¿©·¯ºÐÀÇ »çÀÌÆ®°¡ ³×À̹ö °Ë»ö·Îº¿ÀÇ Á¢±ÙÀ» Çã¿ëÇÏ°í ÀÖ´ÂÁö robots.txt ¿Í ¹æȺ® ¼³Á¤À» ´Ù½Ã Çѹø È®ÀÎÇØ ÁÖ¼¼¿ä.
¸ÞÀÎ ÆäÀÌÁöÀÇ meta ű׿¡ noindex 󸮰¡ µÇ¾îÀÖ´Ù¸é ÇØÁ¦ÇØÁÖ¼¼¿ä. noindex°¡ Ç¥±âµÈ ÆäÀÌÁö´Â °Ë»ö ¹Ý¿µ¿¡¼ Á¦¿ÜµË´Ï´Ù.
(¿¹¿ÜÀûÀ¸·Î °ø°ø±â°ü, ±³À°±â°ü µî °ø°øÀç ¼º°ÝÀÇ »çÀÌÆ® ¹× »ç¿ëÀÚÀÇ ¼±È£µµ°¡ ³ôÀº »çÀÌÆ®´Â ³»ºÎ Á¤Ã¥¿¡ µû¶ó °Ë»ö ¹Ý¿µÀÌ µÉ ¼ö ÀÖ½À´Ï´Ù)
<meta name="robots" content="noindex">
»çÀÌÆ® Á¦¸ñ°ú ¼³¸íÀº °Ë»ö¿£Áø¿¡¼ ¾ö°ÝÇÏ°Ô °ü¸®ÇÏ°í ÀÖÀ¸¹Ç·Î Á¤Ã¥¿¡ À§¹ÝµÇ´Â Ç׸ñÀÌ ¾ø´ÂÁö HTML ¸¶Å©¾÷ °¡À̵带 ´Ù½ÃÇѹø Âü°íÇϼ¼¿ä.
»çÀÌÆ® ¸ÞÀÎ ÆäÀÌÁöÀÇ Á¤º¸¸¦ HTML frame ű׷Π°¨½Î°í ÀÖ´ÂÁö È®ÀÎÇϼ¼¿ä. frame űװ¡ ÀÏÀ¸Å°´Â ¹®Á¦·Î ÀÎÇÏ¿© »çÀÌÆ® ¸ÞÀÎ ÆäÀÌÁö¿Í °°Àº Áß¿äÇÑ ÆäÀÌÁö¿¡´Â frame ÅÂ±× ´ë½Å ÀÏ¹Ý HTML ű׸¦ »ç¿ëÇÏ´Â °ÍÀ» ±ÇÀåÇÕ´Ï´Ù.
9. »çÀÌÆ®ÀÇ ÄÜÅÙÃ÷°¡ °Ë»ö¿¡ ¹Ý¿µÀÌ ¾ÈµÈ´Ù¸é
ÆäÀÌÁöÀÇ meta ű׿¡ noindex 󸮰¡ µÇ¾îÀÖ´Ù¸é ÇØÁ¦ÇØÁÖ¼¼¿ä. noindex°¡ Ç¥±âµÈ ÆäÀÌÁö´Â °Ë»ö ¹Ý¿µ¿¡¼ Á¦¿ÜµË´Ï´Ù.
ÆäÀÌÁö ³»ÀÇ ¸ðµç ÄÜÅÙÃ÷°¡ ÀÚ¹Ù½ºÅ©¸³Æ®·Î ·ÎµùµÇ´Â ±¸Á¶ÀÎÁö È®ÀÎÇϼ¼¿ä. ´ëºÎºÐÀÇ °Ë»ö¿£ÁøÀº Ç¥ÁØ HTML ¸¶Å©¾÷À» »ç¿ëÇÏ¿© ÄÜÅÙÃ÷¸¦ Á¦°øÇÏ´Â °ÍÀ» ±ÇÀåÇÕ´Ï´Ù.
ÆäÀÌÁö ³»ÀÇ ¸ðµç ÄÜÅÙÃ÷¸¦ HTML frame ű׷Π°¨½Î°í ÀÖ´ÂÁö È®ÀÎÇϼ¼¿ä. ÆäÀÌÁöÀÇ Áß¿äÇÑ ÄÜÅÙÃ÷´Â frame ÅÂ±× ´ë½Å ÀÏ¹Ý HTML ű׸¦ »ç¿ëÇÏ´Â °ÍÀ» ±ÇÀåÇÕ´Ï´Ù.
ÆäÀÌÁö ·Îµù ½Ã ÀÚ¹Ù½ºÅ©¸³Æ® »ç¿ëÇÏ¿© redirect µÇ´ÂÁö È®ÀÎÇϼ¼¿ä. °¡±ÞÀû HTTP redirect ¶Ç´Â HTMLÀÇ head ÅÂ±× ³» meta refresh¸¦ È°¿ëÇÏ´Â °ÍÀ» ±ÇÀåÇÕ´Ï´Ù
10. ³×À̹ö °Ë»ö °á°ú¿¡ ¹Ý¿µµÇ´Â »çÀÌÆ® ³»ÀÇ ¹®¼ ¼ö°¡ Àû´Ù¸é ÆäÀÌÁö ³»ÀÇ ¸µÅ©¸¦ È®ÀÎÇϼ¼¿ä.
À¥¸¶½ºÅ͵µ±¸¿¡ Á¦ÃâµÈ »çÀÌÆ®¸Ê ¹× RSS °¡ ¿Ã¹Ù¸£°Ô Ç¥±âµÇ¾ú´ÂÁö È®ÀÎÇØÁÖ¼¼¿ä. ƯÈ÷, Á¦ÃâµÈ »çÀÌÆ®¸Ê ¹× RSS ³»ÀÇ ¸µÅ©°¡ »ó´ë °æ·Î·Î ÁöÁ¤µÇ¾î ÀÖ´Â °æ¿ì, ¸µÅ©ÀÇ È£½ºÆ®°¡ µî·ÏµÈ »çÀÌÆ®¿Í ÀÏÄ¡ÇÏÁö ¾Ê´Â °æ¿ì ¼öÁýÀ» ÁøÇàÇÏÁö ¾Ê½À´Ï´Ù.
ÆäÀÌÁöÀÇ meta ű׿¡ nofollow 󸮰¡ µÇ¾îÀÖ´Ù¸é ÇØÁ¦ÇØÁÖ¼¼¿ä. nofollow°¡ Ç¥±âµÈ ÆäÀÌÁöÀÇ °æ¿ì ÆäÀÌÁö ³» ¸µÅ© ¼öÁýÀ» ÁøÇàÇÏÁö ¾Ê½À´Ï´Ù.
<meta name="robots" content="nofollow">
ÆäÀÌÁöµéÀÇ ¸µÅ© ó¸® ½Ã ÀÚ¹Ù½ºÅ©¸³Æ®¸¸À» »ç¿ëÇϸé, °Ë»ö·Îº¿ÀÌ ¾î¶² URL ÀÎÁö Á¤È®ÇÏ°Ô ÆľÇÇÒ ¼ö ¾ø¾î¼ ÀÌÈÄÀÇ ´Ù¸¥ ÁÁÀº Á¤º¸µéÀ» ã¾Æ°¥ ¼ö ¾ø´Â ¹®Á¦°¡ ÀÖ½À´Ï´Ù. ³×À̹öÀÇ °Ë»ö·Îº¿¿¡°Ô ¿©·¯ºÐÀÇ »çÀÌÆ® ³»ºÎ ÆäÀÌÁö¸¦ Àß ¾Ë·ÁÁÖ±â À§Çؼ´Â Ç¥ÁØ¿¡ ¸Â´Â ¸µÅ© URLÁ¤º¸¸¦ Á¦°øÇÏ´Â °ÍÀ» ±ÇÀåÇÕ´Ï´Ù.
<a href="http://www.A.com">Link</a>
ÇØ´ç ¸µÅ©°¡ ¾î¶² URL ÀÎÁö Á¤È®ÇÏ°Ô È®ÀÎÇÒ ¼ö ÀÖÀ½
<span onClick="javascript:goto(A)">Link</span>
´ë»ó ¸µÅ©°¡ ÀÚ¹Ù½ºÅ©¸³Æ® ÇÔ¼ö·Î¸¸ Ç¥ÇöµÇ¾î ÀÖ¾î¼ °Ë»ö·Îº¿Àº ÇØ´ç ¸µÅ©ÀÇ Á¤È®ÇÑ URLÀ» ÆľÇÇÒ ¼ö ¾øÀ½