robots txt ํ์ผ ์์ฑ, ์์ , ์ ์ฉ๊น์ง 10๋ถ ์ด์ ๋ฆฌ
๐๊ตฌ๊ธ์์ ์์ ๋
ธ์ถ์ ํ๊ณ ์ถ์ผ์์ฃ ? ์์ ๋
ธ์ถ์ ๋์์ด ๋ ์กฐ๊ฑด์ค์ robots.txt๊ฐ ์์ด์. robots.txt ์ง์ ๋ง๋ค๊ณ ์ ์ถํ๋ ๋ฐฉ๋ฒ๊น์ง 10๋ถ๋ง์ ์๋ ค๋๋ฆด๊ป์! :) ✨์ด ๊ธ์์, ์ป์ด๊ฐ์ค ์ ์๋ ์ ๋ณด๐ ๐1. ๋ฉํฐํ๋กํ์ผ๋ก ์น๊ตฌ ๊ด๋ฆฌ ํ๋ ๋ฐฉ๋ฒ ๐2. ๋ฉํฐํ๋กํ ๋ง๋ค๊ธฐ ์ ์ ๐3. ์นด์นด์คํก ๋ฉํฐํ๋กํ ๋ง๋ค๊ธฐ ๐4. ์นด์นด์คํก ๋ฉํฐํ๋กํ ์ญ์ ํ๊ธฐ ์ฌ๋ฌ๋ถ์๊ฒ ๋์์ด ๋๋ ์ ๋ณด๋ง ๋๋ฆฌ๋๋ก ๋
ธ๋ ฅํ๊ฒ ์ต๋๋ค! ๋ฉํฐํ๋กํ ๋ง๋ค๊ธฐ! ์ง๊ธ ์์ํฉ๋๋ค.๐ ๐'robots.txt ํ์ผ'์ ๋ฌด์์ธ๊ฐ์? robots.txt ํ์ผ์ด ๋ฌด์์ธ์ง ์๊ธฐ ์ํด์ '์น ํฌ๋กค๋ฌ'๊ฐ ๋ฌด์์ธ์ง๋ถํฐ ์์์ผํด์. ๋ด๊ฐ ์ด ๊ธ์ ๊ฒ์์์ง์๊ฒ ๋ฐฐ๋ฌํด์ฃผ๋ ํฌ๋กค๋ฌ ์ฐ๋ฆฌ๊ฐ ๊ธ์ ์จ์ ๋ธ๋ก๊ทธ์ ์ฌ๋ฆฌ๋ฉด, ์๋์ผ๋ก ๊ฒ์์ด ๊ฐ๋ฅํฉ๋๋ค. ์ฌ์ค์ ์ด ์๋ ์์คํ
์์์ ์ด์ฌํ ์ผํ๋ ์น๊ตฌ๊ฐ ์์ต๋๋ค. '์น ํฌ๋กค๋ฌ' ์
๋๋ค. ์น ํฌ๋กค๋ฌ๋ ์ฐ๋ฆฌ๊ฐ ์์ฑํ ๊ธ์ ๊ฒ์ ๋ก๋ด( google search console )์๊ฒ ๊ฐ์ ธ๋ค๊ฐ ์ค๋๋ค. ์
๋ก๋ ํ๋ฉด ์๋์ผ๋ก ์ผ์ด ์ด๋ฃจ์ด์ง๋ ๊ฒ ๊ฐ์ง๋ง, '์ฝํ
์ธ ํฌ๋กค๋ง'์ด ์์ผ๋ฉด ์ฐ๋ฆฌ์ ๊ธ์ ๊ฒ์ ๊ฒฐ๊ณผ์ ๋
ธ์ถ๋์ง ์์ต๋๋ค. ๊ตฌ๊ธ์ ๊ตฌ๊ธ์ ๊ฒ์ ์์ง ํฌ๋กค๋ฌ ๊ฐ ์๊ณ , ๋ค์ด๋ฒ๋ ๋ค์ด๋ฒ๋ง์ ๊ฒ์์์ง ํฌ๋กค๋ฌ ๊ฐ ์์ด์. ๊ฐ์ ๋ด 'ํ ํ์ด์ง'์ ์ฐพ์์์ ์๋ก์ด ๋ธ๋ก๊ทธ ๊ธ์ด ์๋์ง ์ดํด๋ด
๋๋ค. ๊ทธ๋ฆฌ๊ณ ์๋ก์ด ๊ธ์ด ์๋ค๋ฉด ๊ทธ ๊ธ์ ๋ณต์ฌํด์ ๊ฒ์์์ง์๊ฒ ๊ฐ์ ธ๋ค ์ค๋๋ค. ๊ทธ๋ฌ๋ฉด ๊ฒ์ ์์ง์ ๊ทธ ๊ธ์๋ค๊ฐ ์ด๋ฆ์ ๋ถ์ฌ์ฃผ๊ณ (์์ธ), ์ฌ๋๋ค์ด ๊ฒ์์ ํ๋ฉด ๊ฒ์๊ฒฐ๊ณผ์ ๋ง๋ ์ ๋ณด๋ฅผ ๊ฐ์ ธ๋ค๊ฐ ์ฃผ๋๊ฑฐ์์. robots.txt ๋? robots.txt ํ์ผ์ ์ผ์ข
์ ํ๋ ์ง์นจ์์
๋๋ค. ๋ด 'ํ ํ์ด์ง'์ ์ฐพ์์จ ์น ํฌ๋กค๋ฌ์๊ฒ ์ฌ๊ธฐ์์ ํ๋ํ ๊ท์น๋ค์ ์๋ ค์ฃผ๋ ๊ฒ์ด...