نحوه حذف URL های دارای محتوای تکراری یا قدیمی زمانی که محتوا باید در دسترس بازدیدکنندگان باقی بماند زمانی که محتوا نباید در دسترس بازدیدکنندگان…
چگونه URL سایت خود را از نتایج گوگل حذف کنیم؟
آنچه در این مطلب خواهید خواند
پست های اخیر
در حالی که بسیاری از سئوکاران روی ایندکس سریع محتوای سایت تمرکز دارند، اما بعضی وقتها هم نیاز است که بعصی از صفحات به سرعت از نتایج گوگل حذف بشن.
اگه در زمان طراحی سایت، صفحات ایندکس بشن، یا اینکه محتوای حساسی که هرگز نباید در دسترس گوگل قرار می گرفت ایندکس شده، باید این URL ها رو به سرعت از گوگل حذف کنید، درسته؟
تو این مقاله، نحوه حذف URL های سایت از نتایج گوگل رو به شما آموزش می‌دهم.
فهرست:
- نحوه حذف URL های دارای محتوای تکراری یا قدیمی
- URL های کش شده را با گوگل سرچ کنسول حذف کنید
- نحوه حذف URL های آزمایشی
- نحوه حذف URL های اسپم
- نحوه حذف URL های دارای محتوای حساس
- جمع بندی
نحوه حذف URL های دارای محتوای تکراری یا قدیمی
داشتن محتوای تکراری یا قدیمی در سایت رایج ترین دلیل حذف URL ها از گوگل هستش.
اکثرِ محتوای قدیمی هیچ ارزشی برای بازدیدکنندگان نداره، اما همچنان میتونه از نظر سئو مهم باشه. در عین حال، محتوای تکراری میتونه به طور قابل توجهی به عملکرد سئوی شما آسیب برسونه، چونکه گوگل در مورد URLی که باید ایندکس بشه اشتباه میکنه.
اقداماتی که باید برای حذف این URL ها از گوگل انجام بدید، به صفحاتی که می خواید حذف بشن بستگی داره، که در ادامه بهتون میگم چجوری.
زمانی که محتوا باید در دسترس بازدیدکنندگان باقی بماند
گاهی اوقات URL ها باید در دسترس بازدیدکنندگان باقی بمونند، اما نمی خواید گوگل اونها رو ایندکس کنه، زیرا میتونه به سئو سایت آسیب برسونه. این شرایط در مورد محتوای تکراری صدق میکنه.
مثلا فرض کنید، یه فروشگاه آنلاین دارید و تی شرت هایی برای فروش گذاشتید که دقیقاً یکسان هستند به جز رنگ و اندازه‌شون. توضیحات برای همه این تیشرت ها یکسانه فقط هر کدوم نام و تصویر متفاوتی دارند.
در این صورت، گوگل ممکنه محتوای صفحات محصول رو تقریباً تکراری در نظر بگیره. داشتن صفحات تقریبا تکراری منجر به این میشه که گوگل تصمیم بگیره که کدوم URL رو اصلیه و فقط همون رو تو صفحه نتایج نشون بده.
در این شرایط، شما باید به گوگل بگید که کدوم URL ها باید ایندکس بشن و کدوم رو از صفحه نتایج باید حذف کنه. بهترین راه حل در این شرایط به این عوامل بستگی داره:
✅URL دارای ارزش است: اگر URL ترافیک ارگانیک و یا بک لینک از سایت‌های دیگه داره، باید اون رو به عنوان صفحه اصلی یا به اصطلاح کنونیکال انتخاب کنید. پس گوگل همون رو صفحه نتایج نشون میده، در حالی که سایر URL ها همچنان در دسترس بازدیدکنندگان باقی میمونند.
بیشتر بخوانید: تگ کنونیکال چیست و چگونه تگ Canonical را در وردپرس اضافه کنیم؟
✅URL هیچ ارزشی ندارد: اگر URL ترافیک ارگانیک دریافت نمیکنه و بک لینک هم از سایت های دیگه نداره، تگ noindex بهش بدید. این به گوگل خیلی واضح میگه که صفحه رو ایندکس نکنه، در نتیجه اون رو در صفحات نتایج جستجو (SERP) نشون نمیده.
زمانی که محتوا نباید در دسترس بازدیدکنندگان باقی بماند
اگه محتوای قدیمی در وب سایت شما وجود داره که هیچ کس نباید اون رو ببینه، بسته به نوع URL، دو راه براش وجود داره:
✅اگر URL دارای ترافیک و یا لینک است: اون صفحه رو به مرتبط ترین URL در وب سایت خودتون ریدایرکت ۳۰۱ کنید. به صفحات نامربوط ریدایرکت نکنید چون ممکنه گوگل اون صفحه رو به عنوان خطاهای soft-404 در نظر بگیره. این باعث میشه که گوگل هیچ ارزشی برای صفحه‌ای که بهش ریدایرکت میکنید در نظر نگیره.
✅اگه URL هیچ ترافیک و یا لینکی نداره: کد وضعیت HTTP 410 رو بهش بدید یعنی که حذفش کنید و به گوگل بگید که URL برای همیشه حذف شده. وقتی از کد وضعیت ۴۱۰ استفاده می کنید، معمولاً گوگل خیلی سریع URL ها رو از صفحه نتایج حذف میکنه.
URL های کش شده را با گوگل سرچ کنسول حذف کنید
گوگل معمولاً یه کپی از صفحات شما رو در حافظه پنهان نگه میداره، واسه همین هم هست که به‌روزرسانی یا حذفش زمان زیادی طول میکشه. اگه میخواید از دیدن کپیِ ذخیره‌شده صفحه توسط بازدیدکنندگان جلوگیری کنید، از ویژگی «Clear Cache URL» در گوگل سرچ کنسول استفاده کنید.
روش حذف URL کش شده در سرچ کنسول
وارد حساب Google Search Console خود بشید.
روی گزینه Removals در منوی ستون سمت چپ کلیک کنید.
روی دکمه NEW REQUEST کلیک کنید.
سپس برید به تب CLEAR CACHED URL.
انتخاب کنید که آیا می خواید گوگل حافظه پنهان رو فقط برای یه URL حذف کنه یا برای همه URL هایی که با یه پیشوند خاص شروع میشن.
URL رو وارد کنید و Next رو بزنید.
نحوه حذف URL های آزمایشی
بعضی وقتها صفحات برای آزمایش نسخه ها و تأیید آنها استفاده میشن. قرار نیست این صفحات آزمایشی برای موتورهای جستجو قابل دسترسی و ایندکس باشند، اما اغلب به اشتباه در دسترس هستند و در صفحه نتایج گوگل قرار میگیرند.
در ادامه بهتون میگم که چجوری به سرعت و به طور موثر URL های آزمایشی رو از گوگل حذف کنید.
وقتی صفحات آزمایشی رتبه بالاتری از URLهای اصلی ندارند
در بیشتر موارد، صفحات آزمایشی رتبه بالاتری از URLهای اصلی ندارند. اگر این مورد برای شما نیز صادق است، مراحل زیر رو برای رفع این مشکل دنبال کنید. در غیر این صورت به بخش بعدی برید.
به حساب گوگل سرچ کنسول خود وارد شوید.
روی گزینه Removals در منوی ستون سمت راست کلیک کنید.
روی دکمه NEW REQUEST کلیک کنید و تب EMPORARILY REMOVE URL براتون باز میشه:
گزینه Remove all URLs with this prefix رو انتخاب کنید، URL / رو وارد کنید و دکمه Next رو بزنید. گوگل اکنون URL ها رو به مدت ۱۸۰ روز مخفی نگه میداره، اما به خاطر داشته باشید که URL ها در ایندکس گوگل باقی میمونند، بنابراین باید اقدامات بیشتری برای حذفشون انجام بدید.
با انجام مراحلی که در بخش Remove cache URLs توضیح داده شد، کپی های ذخیره شده گوگل از محتوا رو حذف کنید.
از تگ noindex استفاده کنید، با افزونه یواست و یا رنک مث میتونید اینکار رو انجام بدید.
نقشه سایت XML با URL های noindex ایجاد کنید تا گوگل بتونه به راحتی اونها رو کشف کنه و دستورالعمل روبات های noindex رو پردازش کنه.
هنگامی که مطمئن شدید که گوگل URL های آزمایشی رو از ایندکس خارج کرده، میتونید نقشه سایت XML رو حذف کنید.
وقتی صفحات آزمایشی رتبه بالاتری از URLهای اصلی دارند
اگه URL های آزمایشی از URL های اصلی بالاتر هستند، این مراحل رو دنبال کنید:
مراحل بخش قبل رو طی کنید.
سپس، URL های آزمایشی رو به URL های اصلی ریدایرکت ۳۰۱ کنید.
اگه می خواید URL های آزمایشی رو از گوگل حذف کنید، هرگز با دستورالعمل Disallow: / در فایل robots.txt خود این کار رو انجام ندهید.
این امر باعث میشه گوگل از دسترسی به URLهای آزمایشی جلوگیری کنه و مانع میشه که از تگ noindex مطلع بشه! گوگل URL های آزمایشی رو در صفحه نتایج نشون میده، با یه اسنیپت بسیار ضعیف مثل این:
نحوه حذف URL های اسپم
اگه وب سایت شما هک شده و تعداد زیادی URL های اسپم داره، باید در اسرع وقت از شر اونها خلاص بشید تا به سئوی سایت شما آسیب نرسه.
مراحل زیر را دنبال کنید تا به سرعت آسیب رو جبران کنید.
مرحله ۱: از ابزار Removals در گوگل سرچ کنسول استفاده کنید
ابزار حذف گوگل به شما کمک میکنه تا به سرعت صفحات اسپم رو از صفحه نتایج حذف کنید. حواستون باشه که این ابزار صفحات را deindex نمیکنه – فقط به‌طور موقت اونها رو پنهان میکنه.
نحوه حذف URL با استفاده از ابزار Removals در سرچ کنسول
وارد گوگل سرچ کنسول بشید.
روی دکمه Removals در منوی ستون سمت راست کلیک کنید.
روی NEW REQUEST کلیک کنید و تب EMPORARILY REMOVE URL براتون باز میشه:
Remove this URL only رو انتخاب کنید، URLی رو که میخواید حذف کنید رو وارد کنید و دکمه Next رو بزنید. گوگل اکنون URL رو به مدت ۱۸۰ روز مخفی نگه میداره، اما به خاطر داشته باشید که URL ها در ایندکس گوگل باقی میمونند، بنابراین باید اقدامات بیشتری برای پنهان کردن اونها انجام بدید.
تا جایی که نیاز هست این کار رو تکرار کنید. اگه با تعداد زیادی از صفحات اسپم سر و کار دارید، توصیه می کنیم روی پنهان کردن صفحاتی که بیشتر در گوگل ظاهر میشن تمرکز کنید. از گزینه Remove all URLs with this prefix با احتیاط استفاده کنید، چون ممکنه همه URL ها (احتمالاً هزاران) رو که با پیشوندی که در قسمت Enter URL وارد کردید، پنهان کنه.
همچنین با انجام مراحلی که در بخش Remove Cache URLs توضیح داده شد، کپی های ذخیره شده گوگل از URL های اسپم رو حذف کنید.
مرحله ۲: URL های اسپم را حذف کنید و کد ۴۱۰ بدهید
با بازیابی یه نسخه پشتیبان، وضعیت قبلی وب سایت خود رو بازیابی کنید. به روز رسانی ها رو اجرا کنید و سپس اقدامات امنیتی بیشتری رو اضافه کنید تا مطمئن بشید که سایت شما دیگر آسیب پذیر نیست. سپس بررسی کنید که آیا همه URL های اسپم از وب سایت شما حذف بشن یا خیر. بهترین کار اینه که کد وضعیت ۴۱۰ HTTP رو بهش بدید تا کاملاً مشخص بشه که این URL ها ناپدید شدند و هرگز برنمیگردند.
مرحله ۳: نقشه سایت XML اضافی ایجاد کنید
URL های اسپم رو در نقشه سایت XML جداگانه قرار بدید و اون را در گوگل سرچ کنسول ثبت کنید. به این ترتیب، گوگل به سرعت آدرس‌های URL رو از بین میبره و شما به راحتی میتونید فرآیند حذف رو از طریق گوگل سرچ کنسول نظارت کنید.
بازم تاکید میکنم که دستورالعمل Disallow: / رو برای رفع این مشکلی در فایل robots.txt اضافه نکنید، چونکه در اینصورت گوگل نمیتونه URLها رو دوباره بخزه.
گوگل باید متوجه بشه که URL های اسپم حذف شدند.
نحوه حذف URL های دارای محتوای حساس
اگه داده‌های حساسی مثل جزئیات مشتری یا رزومه‌های متقاضیان شغل رو جمع‌آوری میکنید، حفظ امنیت اونها ضروریه. تحت هیچ شرایطی نباید این داده ها توسط گوگل – یا هر موتور جستجوی دیگه‌ای ایندکس بشن.
با این حال، ممکنه اشتباهاتی رخ بده و محتوای حساس توی نتایج جستجو نشون داده بشن. در ادامه روش حل این مشکل رو بهتون میگم.
مرحله ۱: از ابزار Removal گوگل سرچ کنسول استفاده کنید
پنهان کردن صفحات با محتوای حساس از طریق ابزار Removal، سریع‌ترین راه برای متوقف کردن نمایش اونها در نتایج جستجو هستش. با این حال، به خاطر داشته باشید که این ابزار فقط صفحات رو به مدت ۱۸۰ روز پنهان میکنه و اونها رو برای همیشه از ایندکس گوگل حذف نمیکنه.
مرحله ۲: محتوا را حذف کرده و وضعیت ۴۱۰ را به آن بدهید
اگه دیگه نیازی به داشتن محتوای حساس در وب سایت خود ندارید، میتونید URL ها رو حذف کنید و کد وضعیت ۴۱۰ HTTP رو بهش بدید. این به گوگل میگه که URL ها برای همیشه حذف شدند.
مرحله ۳: از نقشه سایت XML اضافی استفاده کنید
برای کنترل و نظارت بر روند حذف URL های دارای محتوای حساس، اونها رو به نقشه سایت XML جداگانه اضافه کنید و اون رو در گوگل سرچ کنسول ثبت کنید.
مرحله ۴: از پخش شدن داده های حساس جلوگیری کنید
برای جلوگیری از ایندکس شدن و لو رفتن مجدد محتوای حساس، اقدامات امنیتی مناسبی رو انجام دهید تا این اتفاق دیگه نیافته.
جمع بندی
موقعیت‌های زیادی وجود داره که باید فورا URLها رو از گوگل حذف کنید.
به خاطر داشته باشید که هیچ رویکرد مناسب همه شرایط نیست، زیرا هر موقعیتی به رویکرد متفاوتی نیاز داره. اما میتونیم اکثر موقعیت هایی که در اون ها باید URL ها رو حذف کنیم جلوگیری کنیم.
در این مقاله در اینکه چگونه URL سایت خود را از نتایج گوگل حذف کنید صحبت کردیم. ممنون که تا انتهای مقاله همراه من بودید در صورتی که حس میکنید مطلبی هست که گفته نشده حتما در قسمت نظرات با ما به اشتراک بگذارید. در صورت داشتن هرگونه سوال با تیم پشتیبانی پارس اوستا در ارتباط باشید.
اشتراک در
وارد شدن
0 نظرات
قدیمی‌ترین