آموزش بهینه سازی و سئو Robots.txt
1395/08/14
ارسال شده توسط Manager
731 بازدید
فایل Robots.txt نقش بزرگی در سئوی سایت شما ایفا می کند و در کل نتیجه مثبتی در بهینه سازی سایت شما به جا می گذارد . فایل Robots.txt در واقع رابط بین وب سایت شما و ربات های جستجوگر می باشد که با دستوراتی که شما در این فایل اضافه می کنید ، ربات ها با توجه به آن دستورات به کار خود ادامه می دهند .
آیا نیاز به فایل Robots.txt هست ؟
با نبود فایل Robots.txt شما عملا نمی توانید از ایندکس و یا عدم ایندکس مطالب و یا دایرکتوری های خاص جلوگیری کنید . همینطور با معرفی سایت مپ در فایل Robots.txt ربات های جستجوگر از وجود سایت مپ شما به خوبی آگاه می شوند و در صورت عدم ثبت سایت مپ در بخش گوگل وب مستر ، معرفی سایت مپ در فایل Robots.txt می تواند کافی باشد .
ما به شما شدیدا توصیه می کنیم اگر فایل Robots.txt ایجاد نکرده اید حتما آن را ایجاد نمایید .
فایل Robots.txt در کجاست ؟ چگونه می توان Robots.txt ایجاد کرد ؟
این فایل دقیقا در مسیر اصلی سایت (روت) قرار گرفته است و در عدم وجود آن شما باید این فایل را در این مسیر ایجاد نمایید .
خوبی فایل Robots.txt این است که می توان آن را در کامپیوتر به راحتی با برنامه notepad ایجاد کرد و بعد از افزودن کد های مورد نظر آن را در روت سایت آپلود کرد .
چگونه از فایل Robots.txt استفاده کنیم؟
فرمت دستورات فایل Robots.txt بسیار آسان است . برای مثال در خط اول از دستور user agent استفاده می شود که در واقع این دستور مربوط به ربات های جستجوگر می باشد . برای مثال می توانید فقط از ربات های گوگل و بینگ استفاده کنید که کافیه به این صورت عمل کنید : User-Agent: Googlebot یا User-Agent: Bingbot . اما در صورتی که بخواهید تمامی ربات ها را فراخوانی کنید باید به این صورت عمل کنید : * :User-Agent
در خط های بعدی هم با دستورات Allow و Disallow مشخص می کنید که ربات ها به این بخش ها دسترسی داشته باشند و یا خیر .
نمونه فایل Robots.txt :
User-Agent: *
Allow: /wp-content/uploads/
Disallow: /wp-content/plugins/
Disallow: /readme.html
در این نمونه کد خط دوم به ربات ها اجازه می دهد تا تمامی تصاویر های استفاده شده در مطالب شما ایندکس شوند و در خط سوم و چهارم اجازه به ایندکس مسیر پلاگین و فایل readme.html به ربات ها داده نمی شود .
افزودن سایت مپ به فایل Robots.txt
اگر شما از پلاگین هایی برای ایجاد سایت مپ استفاده می کنید پس لازم است لینک سایت مپ خود را در فایل Robots.txt قرار دهید تا ربات ها از وجود سایت مپ شما با خبر شوند .
برای اینکه سایت مپ خود را به فایل Robots.txt اضافه کنید کافیه به صورت زیر عمل کنید :
Sitemap: http://seofirstpage.ir/sitemap.xml
در صورتی که سایت مپ شما بصورت جداگانه باشد یعنی برای مطالب ، صفحات و… سایت مپ بصورت جداگانه باشد آن ها را نیز به روش بالا می توانید اضافه کنید .
مثال :
Sitemap: http://seofirstpage.ir/post-sitemap.xml
Sitemap: http://seofirstpage.ir/page-sitemap.xml
Sitemap: http://seofirstpage.ir/deals-sitemap.xml
Sitemap: http://seofirstpage.ir/hosting-sitemap.xml
پر امتیازترین محصولات
-
آموزش ساخت اپلیکیشن اندروید سایت وردپرس بدون برنامه نویسی
امتیاز 5.00 از 5
129 هزار تومان95 هزار تومان - دوره آموزش آنلاین تلگرام مارکتینگ 169 هزار تومان
- آموزش ایجاد سایت بدون نیاز به کدنویسی رایگان!
- دوره آموزش حضوری گوگل آنالیتیکس 149 هزار تومان
- آموزش گوگل آنالیتیکس Google Analytics 149 هزار تومان
مطالب زیر را حتما مطالعه کنید
چگونه می توان رتبه الکسای سایت را بهبود داد؟
چگونه می توان رتبه الکسای سایت را بهبود داد؟ یکی از روشهای موثر برای افزایش بازدید...
افزودن دکمه تماس در سایت وردپرسی
امروز در خدمتتان هستیم با آموزش افزودن دکمه تماس در سایت وردپرسی . در این...
طراحی وب سایت در 7 گام
1- شناسایی هدف اولین گام و به نوعی یکی از مهمترین گام ها این است...
افزایش سرعت ایندکس با ابزار Fetch as Google
نحوه معرفی صفحات جدید سایت به گوگل با ابزار Fetch as Google جهت ایندکس سریعتر...
تاثیرNOFOLLOW ,FOLLOWبر روی سئو چیست ؟
با توجه به این نکته که بدست آوردن رتبه بالاتر در موتورهای جستجو و بهینه...
پروفایل لینکدین به عنوان یک رزومه کاری قدرتمند
لینکدین یک شبکه اجتماعی محبوب و یک ابزار فوق العاده برای ساختن شبکه ای از...
پاسخی بگذارید
برای نوشتن دیدگاه باید وارد بشوید.