پوشه Robots.txt یا این که فولدر ربات ساز یکیاز مورد ها اساسی در بررسی لیست بهینه سازی تکنیکال میباشد که عمل رباتهای کاوش گر جهت ایندکس آموزش خصوصی سئو صفحه ها متفاوت یک تارنما را در اختیار گرفتن و مدیر مینماید. هر وبسایت برای دستیابی سکو مناسب در شیت نتیجه ها موتور جستجو گر گوگل بوسیله رباتهای متفاوت و به صورت روزمره آیتم پژوهش قرار می گیرد. این رباتها به طور خود کار همه صفحه های یک تارنما را بازدید کرده و آن ها را به نظر ساختاری و فنی تحلیل مینمایند و آن گاه صفحه های بازدید گردیده را در برگه نتیجه ها کاوش اکران می دهند. البته هر وبسایت دارنده بعضی صفحه ها همگانی و یا این که سریای میباشد که اکران آن ها در برگه نتیجه ها کاوش هیچ ضرورتی ندارد و حتی ممکن میباشد به seo تارنما لطمه وارد نماید.
در اینجاست که تشکیل داد فولدر Robots.txt به امداد شما می آید و این خلل را به راحتی برطرف میسازد. با ساختوساز یک فولدر robots.txt می توانید عمل رباتها و خزندههای اینترنت را برای ایندکس کردن صفحه ها وب سایت خویش محصور سازید. البته چطور و چه گونه؟ به دنبال این مقاله ماهیت و کارکرد پوشه ربات ساز را آیتم تحقیق قرار میدهیم و طرز تشکیل داد فولدر Robots.txt را نیز به شما یادگرفتن خوا هیم بخشید. با وبکده یاور باشید.
فولدر robots.txt چیست؟
فولدر Robots.txt یک فولدر متنی بسیار معمولی میباشد که ایندکس کردن صفحه ها وب سایت به وسیله رباتها و خزندههای اینترنت را محصور میسازد. این فولدر در واقع صفحه ها مجاز و غیرمجاز وبسایت جهت ایندکس شدن را به رباتها آرم میدهد و کار آنهارا رئیس مینماید. فولدر Robots.txt دربرگیرنده URLهایی میباشد که نمیخواهید بوسیله رباتهای گوگل و یا این که هر موتور کاوش گر دیگری ایندکس شوند و در معرض روئت کرد یوزرها قرار گیرند. به این ترتیب پوشه ربات ساز از ورود رباتها به صفحه ها موردنظر شما خودداری کرده و ایندکس شدن آن ها را ممنوع خواهد کرد.
وقتی که رباتها یک تارنما را در دور و بر اینترنت پیدا مینمایند، پوشه Robots.txt اولین چیزی میباشد که به سراغ آن می روند تا دریابند کدام صفحه های اذن ورود و ایندکس شدن را دارا هستند و کدام صفحه ها نیز دارنده ممنوعیت ورود می باشند. براین اساس فولدر ربات ساز لهجه برقراری رابطه شما با رباتهای گوگل میباشد که از روش آن میتوانید به رباتها بگویید که کدام صفحه ها را ایندکس کرده و در حاصل جستجوی گوگل اکران دهند و کدام صفحه ها را ایندکس نکرده و در دسترس یوزرها قرار ندهند. فولدر Robots.txt یک پوشه همگانی میباشد که در دایرکتوری روت تارنما ذخیره میگردد و برای یافت کردن آن کافی میباشد اسم تارنما خویش را به همدم robots.txt/ در انتهای آن در مرورگر سرچ نمائید؛ به این صورت: www.website-example.com/robots.txt تا لیست همه پوشهها را مشاهده فرمائید.

افزایش سئو سایت در گوگل