نحوه ویرایش فایل Robots.txt در وردپرس (راهنمای گام به گام)
حذف فایل robots.txt باید با احتیاط انجام شود.
به دایرکتوری اصلی وب سایتی که در وردپرس اجرا می کنید بروید. به دنبال فایل robots.txt بگردید. اگر وجود ندارد، می‌توانید یک فایل متنی جدید ایجاد کنید و نام آن را «robots.txt» بگذارید.
مرحله 3: فایل robots.txt را دانلود و ویرایش کنید
فایل متنی را با نام “robots.txt” ذخیره کنید و مطمئن شوید که پسوند فایل “.txt” باشد.
مرحله 4: فایل robots.txt را آپلود کنید:
این فایل به عنوان یک ابزار ارتباطی بین وب‌سایت شما و خزنده‌های موتور جستجو عمل می‌کند و دستورالعمل‌هایی را ارائه می‌کند که در کدام صفحات باید خزیدن و فهرست‌بندی شوند.
تغییرات را ذخیره کنید و فایل robots.txt به روز شده را در دایرکتوری ریشه وب سایت خود بارگذاری کنید و در صورت لزوم فایل موجود را جایگزین کنید.
مثال: تنظیم تاخیر خزیدن
پس از ویرایش فایل robots.txt، روی دکمه “ذخیره تغییرات در Robots.txt” کلیک کنید تا تغییرات شما ذخیره شود.
مثال: اجازه خزیدن دایرکتوری
برای حذف یا ویرایش robots.txt از صفحه، باید روش زیر را دنبال کنید:
روش 1: ویرایش فایل Robots.txt با استفاده از AIOSEO
مرحله 1: AIOSEO را نصب و فعال کنید
این مثال به ربات‌های موتور جستجو می‌گوید که بین دسترسی به هر صفحه 5 ثانیه منتظر بمانند و به طور موثر نرخ خزیدن را کاهش دهند.
چگونه robots.txt را از وب سایت وردپرس حذف کنیم؟
به یک ویرایشگر متن (مانند Notepad) بروید و یک فایل متنی جدید اضافه کنید.
مرحله 2: دستورات مورد نظر را اضافه کنید
عامل کاربر: * مجاز: /images/
غیرفعال کردن فایل robots.txt به طور کلی توصیه نمی شود.
کلاینت FTP خود را راه اندازی کنید و با استفاده از اعتبار FTP خود با وب سایت خود ارتباط برقرار کنید.
مرحله 2: فایل robots.txt را پیدا کنید
عامل کاربر: * غیر مجاز: /private-page/
به دایرکتوری اصلی وب سایت وردپرس خود بروید و فایل robots.txt را پیدا کنید.
مرحله 3: فایل robots.txt را حذف کنید
روی فایل robots.txt راست کلیک کرده و گزینه Delete را انتخاب کنید. هنگامی که از شما خواسته شد، حذف را تأیید کنید.
چگونه یک فایل robots.txt بسازیم اگر می خواهید پس از حذف آن را برگردانید؟
در ویرایشگر فایل، محتوای فایل robots.txt فعلی خود را خواهید دید. با افزودن یا اصلاح دستورالعمل ها، تغییرات لازم را در فایل ایجاد کنید.
مرحله 4: تغییر را ذخیره کنیدس
به ربات‌های موتور جستجو دستور می‌دهد که در کدام صفحات یا دایرکتوری‌ها باید برای خزیدن و نمایه‌سازی در دسترس باشند. با کنترل محتوایی که موتورهای جستجو می توانند به آن دسترسی داشته باشند، می توانید دید وب سایت خود را در نتایج موتورهای جستجو بهینه کنید.
نحوه حذف و ویرایش Robots.txt از یک صفحه
پس از فعال شدن، به AIOSEO » Tools » File Editor بروید.
مرحله 3: فایل robots.txt را ویرایش کنید
عامل کاربر: * تاخیر خزیدن: 5
انجام این کار به ربات های موتور جستجو امکان دسترسی نامحدود به وب سایت شما را می دهد که ممکن است منجر به عواقب ناخواسته شود. صفحاتی که می‌خواهید خصوصی نگه دارید یا از نتایج جستجو حذف شوند ممکن است فهرست شوند.
درک ساختار پیش‌فرض فایل robots.txt وردپرس و روش‌های ویرایش، حذف یا ایجاد آن برای بهینه‌سازی دید وب‌سایت و رتبه‌بندی موتورهای جستجو بسیار مهم است.
اگر تصمیم دارید فایل robots.txt را پس از حذف مجدداً بازیابی کنید، می‌توانید فایل جدیدی را به دنبال این مراحل ایجاد کنید:
مرحله 1: یک فایل متنی جدید ایجاد کنید
فایل robots.txt را در رایانه خود دانلود کنید. آن را با استفاده از یک ویرایشگر متن باز کنید و تغییرات لازم را در دستورالعمل ها ایجاد کنید.
مرحله 4: فایل robots.txt اصلاح شده را آپلود کنید
اگر می‌خواهید سرعت خزیدن ربات‌های موتور جستجو را کاهش دهید، می‌توانید تاخیر خزیدن را تعیین کنید. فایل robots.txt را با استفاده از یک سرویس گیرنده FTP باز کنید و دستورالعمل زیر را اضافه کنید:
در این پست وبلاگ، ساختار پیش‌فرض فایل robots.txt وردپرس را بررسی می‌کنیم و روش‌های ویرایش، حذف یا ایجاد آن را مورد بحث قرار می‌دهیم.
Robots.txt چیست؟
به داشبورد وردپرس بروید، به آن بروید “پلاگین ها” کلیک کنید “جدید اضافه کن،” جستجو کنید “همه در یک سئو” و افزونه را نصب و فعال کنید.
مرحله 2: به ویرایشگر فایل دسترسی پیدا کنید
کلاینت FTP خود را راه اندازی کنید (مثلاً FileZilla) و اعتبار FTP وب سایت خود را وارد کنید تا اتصال برقرار شود.
مرحله 2: فایل robots.txt را پیدا کنید
فرض کنید می خواهید از خزیدن ربات های موتور جستجو در یک صفحه خاص مانند /private-page/ جلوگیری کنید. یک فایل جدید با نام “robots.txt” با استفاده از ویرایشگر متن ایجاد کنید و دستور زیر را اضافه کنید:
فرض کنید می خواهید موتورهای جستجو در دایرکتوری خاصی مانند /images/ بخزند. در ویرایشگر فایل AIOSEO، دستورالعمل زیر را برای اجازه دادن به خزیدن اضافه کنید:
فایل robots.txt با هدایت خزنده های موتورهای جستجو، نقش مهمی در سئو بازی می کند. غیرفعال کردن آن ممکن است باعث شود موتورهای جستجو صفحاتی را که قصد داشتید خصوصی یا ایمن نگه دارید فهرست بندی کنند.
با این حال، هنگام انجام این مرحله احتیاط کنید، زیرا ممکن است منجر به عواقب ناخواسته شود. برای حذف فایل robots.txt مراحل زیر را دنبال کنید:
مرحله 1: با استفاده از FTP به وب سایت خود متصل شوید
به طور کلی توصیه می شود که یک فایل robots.txt به درستی پیکربندی شده باشد تا کنترل رفتار خزیدن را حفظ کنید.
نتیجه
با این حال، در طول توسعه یا مرحله بندی وب سایت، غیرفعال کردن موقت فایل robots.txt می تواند برای اطمینان از دسترسی نامحدود برای اهداف آزمایش و اشکال زدایی مفید باشد.
آیا حذف Robots.txt تصمیم عاقلانه ای است؟
با استفاده از یک سرویس گیرنده FTP، فایل robots.txt تازه ایجاد شده را در دایرکتوری ریشه وب سایت وردپرس خود آپلود کنید.
مثال: غیر مجاز کردن صفحات خاص
تغییرات را ذخیره کنید و ربات های موتور جستجو اکنون محتوای داخل فهرست /images/ را فهرست می کنند.
روش 2: به صورت دستی فایل Robots.txt را با استفاده از FTP ویرایش کنید
فایل robots.txt یک فایل متنی است که در فهرست اصلی وب سایت قرار دارد.
اگر رویکرد عملی تری را ترجیح می دهید، می توانید فایل robots.txt را با استفاده از یک کلاینت FTP (پروتکل انتقال فایل) به صورت دستی ویرایش کنید. در اینجا یک راهنمای گام به گام آورده شده است:
مرحله 1: با استفاده از FTP به وب سایت خود متصل شوید
با پیروی از دستورالعمل های گام به گام ذکر شده در این راهنما، می توانید به طور موثر فایل robots.txt وب سایت وردپرس خود را مدیریت کنید و اطمینان حاصل کنید که با اهداف سئوی شما مطابقت دارد.
وقتی نوبت به مدیریت یک وب سایت وردپرس می رسد، درک نقش فایل robots.txt بسیار مهم است.
فایل robots.txt تازه ایجاد شده را با استفاده از یک سرویس گیرنده FTP در دایرکتوری ریشه وب سایت وردپرس خود آپلود کنید و موتورهای جستجو دستورالعمل عدم اجازه را برای صفحه مشخص شده رعایت خواهند کرد.
آیا باید Robots.txt را غیرفعال کنم؟
گاهی اوقات، ممکن است بخواهید فایل robots.txt را به طور کلی از وب سایت وردپرس خود حذف کنید. این اقدام به طور موثر به ربات های موتور جستجو اجازه می دهد تا کل وب سایت شما را آزادانه بخزند و فهرست کنند.
دستورالعمل هایی را که می خواهید در فایل robots.txt قرار دهید را مشخص کنید. به عنوان مثال، می‌توانید دایرکتوری‌ها یا صفحات خاصی را با استفاده از دستور «عدم اجازه» مجاز نکنید.