نمونه بهترین حالت فایل robots.txt برای سئو عالی

نمونه بهترین حالت فایل robots.txt برای سئو عالی

نمونه بهترین حالت فایل robots.txt برای سئو عالی

فایل robots.txt، فایلی بسیار مهم و پرقدرت است، اگر شما در حال کار بر روی سئو وب سایت تان هستید. به همین خاطر، باید با مراقبت و دانش کافی از آن استفاده شود. توسط این فایل شما میتوانید به موتورهای جستجو فرمان دهید که میتوانند به چه فایل ها و فولدرهایی دسترسی داشته باشند.

در طول زمان، گوگل و طرز خزیدن در وب آن دچار تغییرات فراوانی شده است، به همین خاطر روش های قدیمی سئو و بهینه سازی وردپرس دیگر پاسخگو نیست. در این پست از آموزش سئو به بررسی نمونه بهترین حالت فایل robots.txt برای سئو عالی می پردازیم.

[box type=”info” align=”aligncenter” class=”” width=””]

در صورت تمایل میتوانید از این صفحات هم دیدن کنید که به سئو وب سایت شما، و دریافت ترافیک بیشتر کمک شایانی خواهند کرد :

گوگل وب سایت شما را به صورت کامل زیر و رو می کند

گوگل دیگر آن بچه ی کوچک و ساده نیست، که تنها HTML وب سایت شما را بررسی، و استایل و جاوا اسکریپت ها را نادیده می گیرفت. این بدین معنا است، زمانی که شما دسترسی گوگل را به فایل های CSS یا JavaScript وب سایت تان قطع میکنید، گوگل اصلا از این موضوع خوشش نخواهد آمد. بارها گفتیم و گفتیم، و باز هم میگیم : فایل های CSS و JavaScript وب سایت تان را بلاک نکنید.

بهترین روش های قدیمی داشتن فایل robots.txt، که دسترسی به ریشه wp-includes و دایرکتوری افزونه ها را بلاک میکند، دیگر معتبر نیست. به همین خاطر به پیشنهاد وب سایت معروف سازنده افزونه سئو yoast بهترین حالت آن است که از فایل پیش فرض وردپرس wp-includes را برداریم.

بسیاری از پوسته ها از تکنولوژی AJAX ، برای اضافه کردن محتوا به صفحه استفاده میکنند. در حالت پیش فرض، وردپرس این موارد را مسدود می کرد. که در نسخه 4.4 وردپرس این مشکل هم حل شد.

مسدود کردن صفحات با استفاده از فایل robots.txt

چیز دیگری است که باید در ذهن داشته باشید. اگر شما آدرسی را با فایل robots.txt سایت خود مسدود کنید، موتورهای جستجو در این صفحات نمی خزند. این بدان معنی است که آنها نمیتوانند مقدار پیوند را در آن آدرس ها توزیع کنند. بنابراین اگر بخشی از سایت شما را هست که مایل نیستید آن را در نتایج جستجو نشان ندهید، اما تعداد زیادی لینک دریافت می کنید، از فایل robots.txt استفاده نکنید. در عوض، از متا تگ robots با مقدار noindex, follow استفاده کنید، دنبال کنید.

چه کاری باید با فیل robos.txt انجام بدیم

وارد حساب کاربری کنسول جستجوی گوگل وارد شوید، سپس به قسمت Crawl → Fetch as Google مراجعه کنید :

نمونه بهترین حالت فایل robots.txt برای سئو عالی

اگر چیزی که میبینید شبیه به تصویر بالا نیست، یا به عنوان مثال ارور، خطا، و یا تذکری مشاهده میکنید، این موارد را با برداشتن خط های مربوطه از فایل robots.txt وب سایت تان، مشکل را برطرف کنید.

آیا لازم است که به نقشه سایت مان در فایل robots.txt در لینک بدیم؟

از دید ما تا حدودی این کار بی معنی می باشد. چون شما در قسمت sitemaps خود کنسول گوگل هم میتوانید لینک نقشه سایت تان را اضافه کنید. اما در صورتی هم که شما تمایل به انجام اینکار دارید، میتوانید به صورت دستی به فایل robots.txt اضافه کنید.

نکته ی آخر اینکه با استفاده از کنسول جستجوی گوگل، با مراجعه به قسمت crawl » robots.txt tester میتوانید به تست و بررسی این فایل مهم بپردازید. هم چنین خطاها و هشدار ها هم در صورت وجود هر گونه مشکل در این قسمت لیست میشوند.

[box type=”success” align=”aligncenter” class=”” width=””]

آموزش نمونه بهترین حالت فایل robots.txt برای سئو عالی وردپرس به پایان رسید. امیدواریم این مطلب هم برای شما عزیزان مفید بوده باشد. هرگونه سوال و یا نظری که در مورد این مطلب دارید در قسمت نظرات این مطلب بیان کنید. وردپرس مانیا پشتیبان شما خواهد بود.[/box]

به این مطلب رای بدید
[تعداد آرا : 1 میانگین : 5]

شما اینجا هستید : خانه » بلاگ » نمونه بهترین حالت فایل robots.txt برای سئو عالی

2 دیدگاه برای “نمونه بهترین حالت فایل robots.txt برای سئو عالی

دیدگاهتان را بنویسید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *