نمایه سازی وب سایت چیست؟ چگونه اتفاق می افتد؟ می توانید پاسخ این سوالات و سوالات دیگر را در مقاله بیابید. نمایه سازی وب (نمایه سازی در موتورهای جستجو) فرآیند افزودن اطلاعات مربوط به یک سایت به پایگاه داده توسط یک ربات موتور جستجو است که متعاقباً برای جستجوی اطلاعات در مورد پروژه های وب که تحت چنین رویه ای قرار گرفته اند استفاده می شود.
داده های مربوط به منابع وب اغلب از کلمات کلیدی، مقالات، پیوندها، اسناد تشکیل شده است. صدا، تصاویر و غیره نیز می توانند ایندکس شوند. مشخص است که الگوریتم تشخیص کلمه کلیدی به موتور جستجو بستگی دارد.
محدودیتی در مورد انواع اطلاعات نمایه شده (فایل های فلش، جاوا اسکریپت) وجود دارد.
مدیریت شروع
نمایه سازی یک سایت یک فرآیند پیچیده است. برای مدیریت آن (مثلاً برای ممنوع کردن پیوست یک صفحه خاص)، باید از فایل robots.txt و دستورالعمل‌هایی مانند Allow، Disallow، Crawl-Delay، User-agent و غیره استفاده کنید.
همچنین از تگ ها و لوازم برای نمایه سازی، پنهان کردن محتوای منبع از روبات های Google و Yandex استفاده می شود (Yahoo از برچسب استفاده می کند).
در موتور جستجوی Goglle، سایت های جدید از چند روز تا یک هفته و در Yandex - از یک تا چهار هفته ایندکس می شوند.
آیا می خواهید سایت شما در جستجوهای نتایج موتور جستجو ظاهر شود؟ سپس باید توسط Rambler، Yandex، Google، Yahoo و غیره پردازش شود. شما باید به موتورهای جستجو (عنکبوت ها، سیستم ها) در مورد وجود وب سایت خود اطلاع دهید و سپس آنها به طور کامل یا جزئی آن را بررسی می کنند.
بسیاری از سایت ها برای سال ها ایندکس نشده اند. اطلاعاتی که در آنها وجود دارد توسط هیچ کس به جز صاحبان آنها دیده نمی شود.
روش های پردازش
نمایه سازی یک سایت را می توان به روش های مختلفی انجام داد:
- گزینه اول اضافه کردن دستی است. شما باید داده های سایت خود را از طریق فرم های ویژه ای که موتورهای جستجو ارائه می دهند وارد کنید.
- در حالت دوم، ربات موتور جستجو خود وب سایت شما را با پیوندها پیدا کرده و آن را فهرست می کند. او می تواند سایت شما را با پیوندهایی از منابع دیگر که به پروژه شما منتهی می شود، پیدا کند. این روش کارآمدترین است. اگر یک موتور جستجو سایتی را به این روش پیدا کند، آن را قابل توجه می داند.
زمان‌بندی
ایندکس کردن سایت خیلی سریع نیست. شرایط متفاوت است، از 1-2 هفته. پیوندهای منابع معتبر (با روابط عمومی عالی و تیتز) به طور قابل توجهی سرعت قرار دادن سایت در پایگاه داده موتورهای جستجو را افزایش می دهد. امروزه گوگل کندترین محسوب می شود، اگرچه تا سال 2012 می توانست این کار را در یک هفته انجام دهد. بهمتأسفانه همه چیز خیلی سریع تغییر می کند. مشخص است که Mail.ru حدود شش ماه است که با وب سایت هایی در این زمینه کار می کند.
ایندکس کردن سایت در موتورهای جستجو برای هر متخصصی امکان پذیر نیست. زمان افزودن صفحات جدید به پایگاه داده سایتی که قبلاً توسط موتورهای جستجو پردازش شده است تحت تأثیر فراوانی به روز رسانی محتوای آن است. اگر اطلاعات تازه به طور مداوم در یک منبع ظاهر می شود، سیستم آن را به طور مکرر به روز می کند و برای مردم مفید است. در این صورت، کار او تسریع می شود.
می توانید پیشرفت نمایه سازی یک وب سایت را در بخش های ویژه برای مدیران وب سایت ها یا در موتورهای جستجو دنبال کنید.
تغییرات
بنابراین، ما قبلاً متوجه شده ایم که سایت چگونه ایندکس می شود. لازم به ذکر است که پایگاه داده های موتورهای جستجو اغلب به روز می شوند. بنابراین، تعداد صفحات پروژه شما که به آنها اضافه می شود ممکن است تغییر کند (هم کاهش و هم افزایش می یابد) به دلایل زیر:
- تحریم موتورهای جستجو علیه وب سایت؛
- وجود خطا در سایت؛
- تغییر الگوریتم موتورهای جستجو؛
- هاست منزجر کننده (عدم دسترسی به سروری که پروژه در آن قرار دارد) و غیره.
پاسخ Yandex به سوالات رایج
"Yandex" یک موتور جستجو است که توسط بسیاری از کاربران استفاده می شود. از نظر تعداد درخواست های تحقیقاتی پردازش شده، رتبه پنجم را در بین سیستم های جستجوی جهان دارد. اگر سایتی را به آن اضافه کردید، ممکن است اضافه کردن آن به پایگاه داده خیلی طول بکشد.
افزودن یک URL، نمایه سازی آن را تضمین نمی کند. این تنها یکی از روش هایی است که به ربات سیستم گفته می شوددر مورد یک منبع جدید اگر لینک‌های کمی به سایتی از سایر وب‌سایت‌ها وجود ندارد یا هیچ پیوندی وجود ندارد، افزودن آن به شما کمک می‌کند آن را سریع‌تر پیدا کنید.
اگر نمایه سازی رخ نداده است، باید بررسی کنید که آیا در زمان ایجاد یک برنامه کاربردی برای آن از ربات Yandex، خرابی روی سرور وجود داشته است یا خیر. اگر سرور خطایی را گزارش کند، ربات کار خود را خاتمه می دهد و سعی می کند آن را به صورت رفت و برگشت تکمیل کند. کارمندان Yandex نمی توانند سرعت افزودن صفحات به پایگاه داده موتور جستجو را افزایش دهند.
نمایه سازی سایت در Yandex کار نسبتاً دشواری است. شما نمی دانید چگونه یک منبع را به موتور جستجو اضافه کنید؟ اگر پیوندهایی به آن از سایر وب سایت ها وجود دارد، پس نیازی به اضافه کردن سایت خاصی ندارید - ربات به طور خودکار آن را پیدا کرده و فهرست می کند. اگر چنین پیوندهایی ندارید، می توانید از فرم "افزودن URL" استفاده کنید تا به موتور جستجو اطلاع دهید که سایت وجود دارد.
به خاطر داشته باشید که افزودن یک URL تضمینی برای نمایه شدن (یا نمایه شدن) ساخته شما نیست.
بسیاری از مردم تعجب می کنند که چقدر طول می کشد تا یک سایت در Yandex ایندکس شود. کارمندان این شرکت تضمینی نمی دهند و شرایط را پیش بینی نمی کنند. به عنوان یک قاعده، از زمانی که ربات از سایت مطلع شد، صفحات آن در جستجو در دو روز، گاهی در چند هفته ظاهر می شود.
فرایند
"Yandex" موتور جستجویی است که به دقت و توجه نیاز دارد. نمایه سازی سایت از سه بخش تشکیل شده است:
- ربات جستجو صفحات منابع را می خزد.
- محتوا(محتوای) سایت در پایگاه (فهرست) سیستم جستجو ثبت می شود.
- در عرض 2-4 هفته، پس از به روز رسانی پایگاه داده، می توانید نتایج را مشاهده کنید. سایت شما در نتایج جستجو ظاهر می شود (یا نمی شود).
بررسی نمایه‌سازی
چگونه نمایه سازی وب سایت را بررسی کنیم؟ سه راه برای انجام این کار وجود دارد:
- نام کسب و کار خود را در نوار جستجو وارد کنید (به عنوان مثال، "Yandex") و هر پیوند را در صفحات اول و دوم بررسی کنید. اگر آدرس اینترنتی فرزند فکر خود را در آنجا پیدا کردید، پس ربات وظیفه خود را انجام داده است.
- می توانید URL وب سایت خود را در نوار جستجو وارد کنید. شما می توانید ببینید که چه تعداد برگه اینترنتی نشان داده شده است، یعنی نمایه شده است.
- ثبت نام در صفحات وب مسترها در Mail.ru، Google، Yandex. پس از تأیید سایت، می‌توانید نتایج نمایه‌سازی و سایر خدمات موتور جستجو ایجاد شده برای بهبود عملکرد منبع خود را مشاهده کنید.
چرا Yandex خراب می شود؟
ایندکس کردن یک سایت در گوگل به این صورت انجام می شود: ربات تمام صفحات سایت را با کیفیت پایین و با کیفیت بدون انتخاب وارد پایگاه داده می کند. اما فقط اسناد مفید در رتبه بندی گنجانده شده است. و "Yandex" بلافاصله تمام زباله های وب را حذف می کند. می‌تواند هر صفحه‌ای را ایندکس کند، اما موتور جستجو در نهایت همه زباله‌ها را حذف می‌کند.
هر دو سیستم دارای شاخص افزایشی هستند. هر دو صفحه با کیفیت پایین بر رتبه وب سایت به عنوان یک کل تأثیر می گذارد. اینجا یک فلسفه ساده در کار است. منابع مورد علاقه یک خاصکاربر موقعیت های بالاتری را در صدور خود اشغال خواهد کرد. اما همین فرد برای یافتن سایتی که دفعه قبل دوستش نداشت مشکل خواهد داشت.
به همین دلیل است که ابتدا لازم است کپی‌هایی از اسناد وب را از نمایه‌سازی بپوشانید، صفحات خالی را بررسی کنید و از ایندکس شدن محتوای بی‌کیفیت جلوگیری کنید.
افزایش سرعت Yandex
چگونه می توانم ایندکس سایت را در Yandex افزایش دهم؟ این مراحل را دنبال کنید:
- مرورگر Yandex را بر روی رایانه خود نصب کنید و از آن برای مرور صفحات سایت استفاده کنید.
- تأیید حقوق مدیریت منبع در Yandex. Webmaster.
- پیوندی به مقاله در توییتر ارسال کنید. مشخص است که Yandex از سال 2012 با این شرکت همکاری می کند.
- جستجوی Yandex را برای سایت اضافه کنید. در بخش «نمایه‌سازی»، می‌توانید آدرس‌های اینترنتی خود را وارد کنید.
- کد "Yandex. Metrica" را بدون علامت زدن "ارسال صفحات برای نمایه سازی ممنوع است" وارد کنید.
- نقشه سایتی تولید کنید که فقط برای ربات وجود داشته باشد و برای مخاطب قابل مشاهده نباشد. تأیید با او آغاز خواهد شد. آدرس نقشه سایت در robots.txt یا به شکل مناسب در "Webmaster" - "Indexing Settings" - "Sitemap Files" وارد می شود.
عملکردهای میانی
چه کاری باید انجام شود تا صفحه وب توسط Yandex ایندکس شود؟ موتور جستجوی داخلی باید سایت را به عنوان منبع اصلی در نظر بگیرد. به همین دلیل است که حتی قبل از انتشار مقاله، اضافه کردن محتوای آن به فرم «متون خاص» ضروری است. در غیر این صورتدزدان سرقت ادبی رکورد را در منبع خود کپی می کنند و اولین نفر در پایگاه داده خواهند بود. در نتیجه، آنها به عنوان نویسنده شناخته خواهند شد.
پایگاه داده Google
برای Google، همان توصیه‌هایی که در بالا توضیح دادیم مناسب هستند، فقط خدمات متفاوت خواهند بود:
- Google+ (جایگزین توییتر)؛
- Google Chrome;
- Google Tools for Programmers - "Scan" - "Look like Googlebot" - گزینه "Scan" - گزینه "Index";
- جستجو در منبعی از Google؛
- Google Analytics (به جای Yandex. Metrics).
ممنوعیت
ممنوعیت نمایه سازی سایت چیست؟ می توانید آن را هم در کل صفحه و هم در قسمت جداگانه ای از آن (پیوند یا قطعه متن) پوشش دهید. در واقع، هم ممنوعیت نمایه سازی جهانی وجود دارد و هم محلی. چگونه اجرا می شود؟
بیایید ممنوعیت افزودن یک وب سایت به پایگاه داده موتور جستجو در Robots.txt را در نظر بگیریم. با استفاده از فایل robots.txt، می‌توانید نمایه‌سازی یک صفحه یا کل عنوان منبع مانند این را حذف کنید:
- کاربر-عامل:
- عدم اجازه: /kolobok.html
- عدم اجازه: /foto/
نکته اول می گوید که دستورالعمل ها برای همه PS ها تعریف شده است، مورد دوم نشان می دهد که نمایه سازی فایل kolobok.html ممنوع است، و مورد سوم اجازه نمی دهد کل پر کردن پوشه foto را به فایل اضافه کنید. پایگاه داده اگر نیاز به حذف چندین صفحه یا پوشه دارید، لطفاً همه آنها را در Robots مشخص کنید.
برای جلوگیری از نمایه شدن یک برگه اینترنتی خاص، می توانید از متا تگ robots استفاده کنید. با robots.txt متفاوت استاین واقعیت که آن را به یکباره به تمام PS دستورالعمل می دهد. این متا تگ از اصول کلی فرمت html پیروی می کند. باید در عنوان صفحه بین تگ ها قرار گیرد. برای مثال، یک ورودی برای ممنوعیت ممکن است به این صورت نوشته شود:.
Ajax
Yandex چگونه سایت های Ajax را ایندکس می کند؟ امروزه بسیاری از توسعه دهندگان وب سایت از فناوری Ajax استفاده می کنند. البته او پتانسیل بالایی دارد. با آن، می توانید صفحات وب تعاملی سریع و سازنده ایجاد کنید.
با این حال، ربات موتور جستجو لیست وب را متفاوت از کاربر و مرورگر "می بیند". به عنوان مثال، شخصی به یک رابط کاربری راحت با برگه های اینترنتی با بارگذاری متحرک نگاه می کند. برای یک خزنده، محتوای همان صفحه می تواند خالی باشد یا به عنوان بقیه محتوای ثابت HTML ارائه شود، که اسکریپت ها برای آن کار نمی کنند.
می توانید از URL بابرای ایجاد سایت های Ajax استفاده کنید، اما موتور جستجو از آن استفاده نمی کند. معمولاً بخشی از URL بعد ازجدا می شود. این باید در نظر گرفته شود. بنابراین، به جای URL مانند https://site.ru/example، او یک برنامه کاربردی به صفحه اصلی منبع واقع در https://site.ru می سازد. این بدان معنی است که محتوای صفحه اینترنتی ممکن است وارد پایگاه داده نشود. در نتیجه، در نتایج جستجو ظاهر نمی شود.
برای بهبود نمایه سازی سایت های Ajax، Yandex از تغییرات در ربات جستجوگر و قوانین پردازش URL چنین وب سایت هایی پشتیبانی می کند. امروزه، مدیران وب‌سایت‌ها می‌توانند با ایجاد یک طرح مناسب در ساختار منابع، نیاز به نمایه‌سازی را به موتور جستجوی Yandex نشان دهند. برای این شما نیاز دارید:
- نمادرا در URL صفحات جایگزین کنیددر !. اکنون ربات متوجه خواهد شد که می تواند برای نسخه HTML محتوای این صفحه اینترنتی درخواست دهد.
- نسخه HTML محتوای چنین صفحه ای باید در یک URL قرار گیرد که در آن ! با ?_escaped_fragment_=جایگزین شد.
