آموزش حذف صفحات ایندکس شده سایت در گوگل

حذف لینک از جستجو گوگل

هدف ما از نوشتن یک محتوا و یا ایجاد یک صفحه جدید در سایت، دیده شدن آن توسط گوگل و کاربران است. اما گاهی مجبور هستیم با حذف صفحات ایندکس شده از گوگل، لینک آن صفحه را از نتایج جستجو حذف کنیم. اما در چه مواقعی ما باید url ها را از گوگل حذف کنیم؟ دلایل اصلی حذف لینک از گوگل چیست؟ در ادامه به صورت کامل خواهیم گفت:

1. صفحاتی با محتوای تکراری یا بی کیفیت

یکی از دلایل افت رتبه سئو سایت، وجود محتواهای تکراری و یا منسوخ شده می باشد. در واقع محتوایی که از نظر کاربر و یا گوگل بی کیفیت و تکراری باشد، می تواند سبب افت رتبه سئو سایت شما شود. در این زمان است که شما باید حذف url انجام دهید و اقدام به حذف صفحه سایت از گوگل کنید و اصطلاحا برای پاک کردن صفحات ایندکس شده در گوگل اقدام کنید.

اما چطور این لینک ها را از گوگل حذف کنیم؟ در گام اول باید بدانید که با حذف یک صفحه، سایت شما با خطای 404 مواجه خواهد شد. این ارور می تواند تاثیر بسیار منفی روی سایت شما داشته باشد؛ به همین دلیل در مرحله اول باید صفحه حذف شده را به صفحه مرتبط و با ارزش دیگر ریدایرکت کنید. برای مطالعه بیشتر در مورد ارور 404 پیشنهاد می کنیم مطلب " خطای 404 چیست؟ " را مطالعه کنید.

برای ریدایرکت آدرس قدیمی به یک url جدید می توانید مطلب " ریدایرکت 301 در وردپرس " را مطالعه کنید. در گام بعدی لازم است که آموزش حذف URL از گوگل را که در ادامه این محتوا به آن پرداختیم را مطالعه کنید.

 

2. حذف آدرس صفحاتی که فقط کاربران باید به آنها دسترسی داشته باشند

در بسیاری از مواقع شما صفحه ای را در سایت خود ایجاد کرده اید که باید از دید گوگل مخفی کرده ولی کاربران به آن دسترسی داشته باشند. به عنوان مثال فرض کنید میخواهید برای عید نوروز صفحه ای را برای جشنواره نوروزی ایجاد کنید. این صفحه پس از مدتی دیگر کاربرد نداشته و به عنوان یک صفحه با محتوای بی ارزش از نظر گوگل شناخته می شود. به همین دلیل باید آدرس آن از دید گوگل مخفی بماند تا ایندکس نشود اما کاربران بتوانند آن را ببینند.

استفاده از تگ کنونیکال

اما گاهی یک صفحه ترافیک زیادی را برای سایت شما دارد؛ به عنوان مثال شما یک فروشگاه اینترنتی دارید که در آن از یک تیشرت چندین رنگ مختلف وجود دارد. هر رنگ از این تیشرت می تواند یک آدرس متفاوتی را ایجاد کند که همگی دارای محتوای تکراری هستند. شما نمی توانید آدرس این صفحات را از گوگل حذف کنید اما می توانید به گوگل کمک کنید تا درک بهتری از این صفحه داشته باشد. برای این کار باید از تگ کنونیکال استفاده کنید. در مطلب " تگ کنونیکال چیست؟ " بیشتر در این مورد صحبت کرده ایم.

 

3. حذف صفحات نامربوط

هنگام نصب بعضی از قالب های وردپرس، یک سری صفحات آماده در اختیار مدیر قرار می گیرد. این صفحات صرفا به این دلیل وجود دارند که مدیر بتواند پیش نمایشی از ظاهر گرافیکی و صفحات سایت خود داشته باشد و همچنین بتواند این صفحات را ویرایش و خصوصی سازی کند. قبل از ایندکس کردن سایت باید این صفحات را حذف کرد. حال گاهی اوقات وبمستر فراموش می کند، این صفحات را پاک کند. در نتیجه تعدادی صفحه تکراری با زبان انگلیسی در سایت وجود دارند که باعث کاهش رتبه سایت می شوند. در این مواقع باید این صفحات ایندکس شده را حذف کرد.

 

4. صفحات حاوی محتوای قدیمی و منسوخ‌شده

در هر سایتی، بخشی از محتواها با گذشت زمان ارزش اولیه خود را از دست می‌دهند یا دیگر به‌روز نیستند. نگه داشتن این صفحات نه‌تنها کمکی به رشد سایت نمی‌کند، بلکه می‌تواند باعث افت رتبه کلی در گوگل شود. نمونه‌هایی از این نوع محتوا شامل مطالب علمی قدیمی، مقالات پزشکی منسوخ یا آگهی‌ها و اطلاعیه‌های موقت هستند. اگر این صفحات حذف یا به‌روزرسانی نشوند، به مرور زمان می‌توانند اعتبار سایر صفحات سایت را نیز تحت تأثیر قرار دهند و عملکرد سئو را کاهش دهند.

 

5. صفحات نتایج جستجوی داخلی

یکی از اشتباهات رایج در بسیاری از سایت‌ها، ایندکس شدن صفحات جستجوی داخلی یا فیلترهاست. این صفحات معمولاً ارزش محتوایی خاصی ندارند و صرفاً نتایج لحظه‌ای از جستجوی کاربران را نمایش می‌دهند. نمایش این صفحات در گوگل می‌تواند باعث ورود کاربران به مسیرهای نامرتبط و تجربه کاربری ضعیف شود. به همین دلیل، بهتر است با مدیریت صحیح ایندکس، از نمایش این نوع صفحات در نتایج جستجو جلوگیری شود.

 

6. صفحات تایید و تشکر

برخی صفحات تنها برای نمایش پیام‌هایی مانند «ثبت موفق بود» یا «از خرید شما متشکریم» طراحی می‌شوند. این صفحات نقش مهمی در تجربه کاربری دارند، اما از نظر سئو هیچ ارزش محتوایی برای موتورهای جستجو ندارند. ایندکس شدن این صفحات نه‌تنها فایده‌ای ندارد، بلکه می‌تواند تمرکز گوگل را از صفحات اصلی و مهم سایت منحرف کند. بنابراین بهتر است از نمایش آن‌ها در نتایج جستجو جلوگیری شود.

 

7. صفحات آزمایشی

در بسیاری از مواقع برای تست قالب، افزونه‌ها یا کدهای جدید، صفحاتی به‌صورت آزمایشی در سایت ایجاد می‌شود. این صفحات صرفاً برای بررسی عملکرد هستند و نباید وارد نتایج گوگل شوند. ایندکس شدن صفحات تستی می‌تواند باعث ایجاد محتوای بی‌کیفیت در نتایج جستجو شود و حتی روی اعتبار کلی سایت تأثیر منفی بگذارد. به همین دلیل، بهتر است این صفحات از همان ابتدا از ایندکس گوگل خارج شوند.

 

8. سایت‌های هک‌شده

در صورتی که سایت مورد حمله قرار بگیرد، ممکن است صفحات ناخواسته و اسپم توسط هکرها ایجاد شود. این صفحات معمولاً هیچ ارتباطی با محتوای اصلی سایت ندارند و می‌توانند تجربه کاربری را به‌شدت تخریب کنند. نمایش این صفحات در گوگل نه‌تنها باعث کاهش اعتماد کاربران می‌شود، بلکه می‌تواند اعتبار دامنه را نیز تحت تأثیر قرار دهد. در چنین شرایطی، حذف سریع این صفحات از ایندکس اهمیت بسیار بالایی دارد.

 

9. تغییر در نام تجاری

زمانی که یک کسب‌وکار تصمیم به تغییر برند یا نام تجاری خود می‌گیرد، ممکن است بخش زیادی از محتوای قدیمی دیگر معتبر نباشد. باقی ماندن این صفحات در نتایج جستجو می‌تواند باعث سردرگمی کاربران و نمایش اطلاعات اشتباه شود. برای جلوگیری از این مشکل، بهتر است صفحات مرتبط با برند قبلی یا به‌روزرسانی شوند یا در صورت نیاز از ایندکس گوگل حذف شوند.

 

10. تغییر در خدمات یا محصولات ارائه‌شده

کسب‌وکارها به‌مرور زمان ممکن است خدمات یا محصولات خود را تغییر دهند یا برخی از آن‌ها را به‌طور کامل حذف کنند. در چنین شرایطی، نگه داشتن صفحات قدیمی که دیگر کاربردی ندارند، ضرورتی ندارد. این صفحات می‌توانند باعث ورود کاربران به اطلاعات اشتباه شوند و نرخ تعامل سایت را کاهش دهند. بنابراین بهتر است این صفحات یا به‌روزرسانی شوند یا در صورت عدم نیاز، از نتایج جستجو خارج شوند.

 

چگونه url را حذف کنیم؟

تا اینجا با دلایلی که باعث می شود به سراغ حذف صفحات از ایندکس گوگل برویم آشنا شدیم. حال ببینیم چطور صفحات ایندکس شده را حذف کنیم؟

• حذف صفحات ایندکس شده از سرچ کنسول

همانطور که در ابتدا گفتیم، دلایل زیادی برای حذف صفحات ایندکس شده وجود دارد؛ بهترین راهکار برای اینکه یک url از جستجو گوگل حذف شود، استفاده از سرچ کنسول است. پس از اینکه به هر دلیلی تصمیم به حذف آدرس حذف یک صفحه از سرچ گوگل گرفتید، باید به سرچ کنسول سایتتان مراجعه کنید. برای این کار لازم است که در ابتدا سایتتان را در سرچ کنسول ثبت کرده باشید.

در مطلب " ثبت سایت در سرچ کنسول " به شما آموزش های لازم را داده ایم. پس از آن برای پاک کردن صفحات ایندکس شده باید مطابق با آموزش زیر اقدام کنید:

از منوی سمت چپ ابزار سرچ کنسول، زیر منوی Removals را انتخاب کنید. با انتخاب این گزینه، صفحه ای مانند تصویر زیر به شما نشان داده می شود؛ پس از آن روی دکمه قرمز رنگ " NEW REQUEST " کلیک کنید.

در ادامه حذف صفحات ایندکس شده در گوگل، وارد تب "TEMPORARILY REMOVE URL" شوید. دو گزینه مانند صفحه زیر به شما نشان داده می شود که برای حذف یک url باید گزینه " Remove this URL only " را انتخاب کنید. در کادر مشخص شده، آدرس صفحه مورد نظرتان را وارد کرده و روی " next " کلیک کنید.

 

قسمت Safesearch Filtering در سرچ کنسول

در این قسمت لینک صفحاتی از سایت خود را مشاهده می کنید که توسط کاربران به دلیل محتوای ناهنجار، خشونت آمیز و ... گزارش شده اند. به این ترتیب این صفحات سایت شما در نتایج جستجوی کاربرانی که قابلیت Safesearch گوگل خود را فعال کرده باشند، نمایش داده نمی شود.

 

قسمت Outdated Content در سرچ کنسول 

در سرچ کنسول گوگل و در قسمت Removals بخشی با عنوان Outdated Content وجود دارد. هنگامی که کاربران متوجه یک محتوای قدیمی در سایت شما شوند، آن را به گوگل گزارش می دهند. به این ترتیب چنین صفحاتی دیگر در نتایج جستجو نمایش داده نخواهند شد. 

 

 

• حذف لینک به کمک noindex

ربات های گوگل قبل از ایندکس یک صفحه ابتدا کدهای آن را می خوانند. حال اگر کد noindex را در این صفحات اضافه کنیم، موتورهای جستجو صفحه مورد نظر را ایندکس نمی کنند. به این صورت که کد زیرا را در قسمت head صفحه وارد کنید و به ربات ها دستور دهید صفحه مورد نظر را ایندکس نکنند.

<“meta name=”robots” content=”noindex>

برای دستور نو ایندکس به ربات های گوگل می توانید از فایل robot هم کمک بگیرید. در مطلب " robots.txt چیست؟ " به صورت کامل در این باره صحبت کرده ایم.

اما اگر وب سایت شما وردپرسی است. یک روش ساده برای نو ایندکس کردن صفحه وجود دارد و آن هم حذف صفحات ایندکس شده بوسیله افزونه yoast است. افزونه یواست یکی از افزونه های پرکاربرد وب سایت های وردپرسی است. از این افزونه به راحتی می توانید صفحه مورد نظر خود را از دید ربات های گوگل مخفی کنید. برای اینکار باید پس از نصب افزونه به سراغ صفحه ای بروید که میخواهید آن را نوایندکس کنید. در پایین صفحه، منو افزونه یواست وجود دارد، باید روی آن کلیک کنید تا باز شود. در پایین این قسمت گزینه ی پیشرفته را انتخاب کنید.

 

پنجره جدیدی باز می شود که عبارت " به موتورهای جستجو اجازه نمایش این نوشته را می دهید؟ " در آن وجود دارد، روی آن کلیک کنید حال دو گزینه بله و خیر برای شما نمایش داده می شود، کافی است گزینه خیر را انتخاب کنید تا این صفحه از حالت ایندکس خارج شود.

 

• حذف صفحات با استفاده از رمز عبور

روش دیگر برای حذف سایت از گوگل، استفاده از رمز عبور برای صفحات است. اگر صفحات سایت شما رمز عبور داشته باشند، گوگل و دیگر موتورهای جستجو نمی توانند آن صفحات را ایندکس کنند و کاربران نیز بدون زدن پسورد نمی توانند وارد آن صفحه شوند. بنابراین برای اینکه یک صفحه را نوایندکس کنید می توانید برای آن رمز عبور تعیین کنید. در سایت های وردپرسی در منو سمت چپ صفحه در قسمت قابلیت مشاهده باید گزینه رمز دار را فعال کنید.

 

 

چرا برخی از صفحات سایت را از ایندکس گوگل حذف کنیم؟

در ادامه به بررسی دلایل حذف برخی از صفحات سایت از ایندکس گوگل می پردازیم.

1- حفظ اطلاعات و حریم خصوصی

گاهی اوقات یک سری اطلاعات یا صفحات سایت شما نباید در دسترس عموم و بر روی اینترنت قرار گیرد. اما لازم است برخی از کاربران به آنها دسترسی داشته باشند. مانند ویدیوهای آموزشی استفاده از یک نرم افزار، سایت و ... که تنها لازم است مشتریان شما آن را مشاهده کنند. در چنین شرایطی می توانید اینگونه صفحات را از ایندکس گوگل حذف کنید و آنها را تنها در اختیار برخی از مشتریان خود قرار دهید. 

 

2- عدم اتلاف بودجه خزش

منظور از بودجه خزش میزان زمانی است که خزندگان گوگل صرف بررسی صفحات یک سایت می کنند. در صورتی که صفحات سایت خود را مدیریت نکنید و اجازه ایندکس شدن به تمامی آنها بدهید، بودجه خزش خود را بیهوده از دست می دهید. در چنین شرایطی بهتر است آن دسته از صفحاتی که ارزش ایندکس شدن ندارند را از ایندکس گوگل حذف کنید تا بودجه خزش سایت تان بیهوده از بین نرود. در مقاله " بودجه خزش یا Crawl Budget چیست؟ " درباره بودجه خزش و روش های افزایش آن توضیح داده ایم.

 

 

در پایان

همانطور که در ابتدا گفتیم، دلایل زیادی برای حذف لینک از جستجو گوگل وجود دارد. برای حذف url در گوگل ابتدا باید نوع صفحه و دلایل حذف آن را مشخص کنیم. به عنوان مثال اگر می خواهیم یک محتوای تکراری حذف کنیم، ابتدا باید آن را ریدایرکت و سپس به کمک ابزار removals، آدرس آن را از نتایج حذف کنید. اما در مقابل اگر می خواهیم تنها آدرس یک صفحه از دید گوگل مخفی بماند اما آن صفحه توسط کاربران دیده شود، باید از تگ نوایندکس کمک بگیریم.