مديريت كراولرهاي موتورهاي جستجو

در اين مقاله ما مي خواهيم در مورد كنترل كراولر هاي موتور جستجو، بلاك كردن ربات ها، فرستادن آن ها به جا هايي كه مي خواهيم و محدود كردن آنها از جايي كه نمي خواهيم به آن جا بروند، صحبت كنيم.

براي شروع، ما مي خواهيم در مورد روش هاي كنترل ربات ها بحث كنيم، كه شامل سه روش اصلي robots.txt، meta robots و تگ nofollow كه كمتر ربات ها را كنترل مي كند.

همچنين چند مورد ديگر نيز وجود دارد كه ما نيز در مورد آن ها بحث خواهيم كرد، از جمله ابزار وب مستر (مانند Google Search Console) و كدهاي وضعيت URL نيز صحبت خواهيم كرد. اما در ابتدا اجازه دهيد كه به سه روش اصلي كه در بالا ذكر كرديم، بپردازيم پس با سئو تضميني سايت همراه باشيد.

همانطور كه مي دانيد Robots.txt در yoursite.com/robots.txt قرار دارد، كه به كراولر ها مي گويد كه اجازه دارند به كجا دسترسي داشته باشند و به كجا دسترسي نداشته باشند، اما گوگل و بينگ هميشه به محتواي اين فايل احترام نمي گذارند. براي مثال بسياري از ما ها خيلي واضح به ربات هاي موتور جستجو گفتيم كه «هي، به اين كاري نداشته باش» اما يك دفعه مي بينيد كه همين URL را در نتايج نمايش مي دهد، همه ي ما از اين كار موتور جستجو تعجب مي كنيم كه چرا اين اتفاق افتاده است. بعضي وقت ها موتور هاي جستجو مانند گوگل و بينگ فكر مي كنند كه بيشتر و بهتر از شما و سايت شما و اطلاع دارند و بهتر بلدند. آن ها فكر مي كنند كه شايد شما اشتباه كرده ايد، و با خود فكر مي كنند كه «هي، لينك هاي زيادي وجود دارد كه به اين محتوا اشاره مي كنند، كاربران زيادي از اين صفحه و محتويات آن بازديد مي كنند و به آن اهميت مي دهند، پس ممكن است كه شما قصد نداشته باشيد كه جلوي ما را براي ايندكس كردن اين صفحه بگيريد». هر چند شما بهتر در باره ي يك URL خاص و منحصر به فرد، واضح تر باشيد، معمولا موتورهاي جستجو بهتر به نظر شما احترام مي گذارند. در صورتي وضوح شما كمتر باشد موتور هاي جستجو كمتر به آن احترام نمي گذارند، براي مثال شما مي توانيد به موتور هاي جستجو بگويد كه«اين دايركتوري و هر چيزي را كه پشت آن قرار دارد را بي خيال شو» در اين صورت احتمال اين كه موتو هاي جستجو به اين خواسته شما عمل كنند بسيار كم خواهد بود.

 متا روبات ها Meta robots

متا روبات ها Meta robots

داستان متا روبات ها Meta robots مقداري متفاوت است، آن ها به صورت منحصر به فرد در هدر صفحه ها نوشته مي شوند، پس مي توانيم گفت شما با تگ Meta robots تنها مي توانيد يك صفحه را كنترل كنيد. اين تگ به موتور هاي جستجو مي گويد كه آيا بايد يك صفحه را وارد ليست ايندكس خود بكنند يا نه. موتور هاي جستجو معمولا به اين روش احترام بيشتري مي گذارند چون شما آن را منحصرا براي يك صفحه نوشته ايد و گوگل و بينگ مي خواهند به تگ Meta robots شما اعتماد داشته باشند.

نكته جالب راجب به meta robotها و robots.txt اين است كه گاهي اين دو با هم كار مي كنند و گاها نيز با هم كار نمي كنند و بسياري از افراد افراد فعال در ضمينه سئو در اين ضمينه گيج و نا اميد مي شوند.

براي مثال، ما يك صفحه مانند «blogtest.html» در دامنه خود داريم و مي گوييم كه «كراولر ها، شما اجازه نداريد كه اين صفحه را كراول كنيد». خوب اين روش خوبي است كه اجازه ندهيم كه اين صفحه كراول شود، اما اجازه ندادن به ربات ها كه يك صفحه را كراول كنند به اين معني نيست كه موتور هاي جستجو اين صفحه را در صفحه ي نتايج نشان ندهند.

خوب پس بيايد كه اطمينان خود را دو برابر كنيم كه اين صفحه ما در نتايج جستجو نمايش داده نمي شود: پس ما تگ متا ربات را به صورت زير قرار مي دهيم:

بنابراين، “noindex، follow” به كراولر هاي موتور جستجو مي گويد كه آن ها مي توانند پيوندهاي مربوط به صفحه را دنبال كنند، اما آن ها نبايد اين مورد خاص را ايندكس كنند.

جواب اين است كه شما به موتور هاي جستجو گفتيد كه اين صفحه را كراول نكند، و آن ها اين كار را نكرده اند. اما با اين حال آن ها هنوز آن را واردن تايج جستجوي خود مي كنند. احتمالا آن ها توضيحات متا را حساب نكرده اند; ممكن است كه آن ها به شما بگويند كه «ما نمي توانيم توضيحات متا را به خاطر وجود فايل robots.txt سايت شامل قرار بديم». دليل نشان دادن اين است كه آن ها نمي توانند noindex را ببينند تنها چيزي مشاهده مي كنند disallow است.

بنابراين، اگر واقعا بخواهيد چيزي حذف شود، و كسي نتواند آن را در نتايج جستجو مشاهده كند، شما نمي توانيد فقط يك كراولر را غيرفعال كنيد. شما ابتدا بايد متاي «noindex» را بيان كنيد سپس به آن ها اجازه دهيد كه آن را كراول كند.

خوب هر كدام از اين عوامل عوارض جانبي نيز به همراه دارد. اگر بخواهيم پهناي باند كراولر ها را براي خود ذخيره كنيم Robots.txt عالي خواهد بود، اما لزوما اين روش براي جلوگيري از نمايش يك صفحه در نتايج جستجو آيده ال نيست. و ما هم آن را توصيه نمي كنيم، اتقاقا زماني تويتر همين كار را كرد. توتير سعي كرد كه نسخه هاي سايت خود كه يكي از آن ها با www و نسخه ديگر آن بدون www بود را كانوني سازي كند، آن ها سعي كردند كه به گوگل بگويند ديگر نسخه www سايت را كراول و ايندكس نكنند، اما بعدا فهميدند كه گوگل هنوز هم نسخه همراه با www را در نتيج نمايش مي دهد. خوب، بعد از آن فهميدند كراول نكردن صفحه ها تنها كافي نيست و باد شروع به كانوني سازي صفحه ها با استفاده از rel canonical و 301 redirect كردند.

Meta robotها مي توانند به اجازه كراول كردن و دنبال كردن لينك ها(link-following) را بدون ايندكس كردن بدهند، ولي اين روش نيازمند بودجه اي براي كراولر ها است(هر سايتي به اندازه اي مشخصي از طرف موتور هاي جستجو كراولر دريافت مي كند) و همچنين شما هنوز هم مي توانيد ليست ايندكس ها خود را حفظ كنيد.

منبع :  

https://unsplash.com/@ericabass7
https://www.evernote.com/shard/s619/sh/e8e514ab-c3fe-22ec-d652-989c0b156619/69b9a2277abd7033464a738c5de610cb
https://www.liveinternet.ru/stat/guaranteedseo.ir/
https://coub.com/ericabass7
https://3dwarehouse.sketchup.com/user/4c990e56-bbd7-412a-85e1-3852c2f89c47/Erica-B
https://seekingalpha.com/user/55188870/comments
https://lionofviennasuite.sbnation.com/users/EricaBass7
https://www.spreaker.com/user/15532666
https://justpaste.it/37sgm
https://www.atlasobscura.com/users/ericabass7
https://trello.com/ericabass7
https://www.diigo.com/user/ericabass7

 

بهينه سازي سايت براي موتورهاي جستجو

آموزش سئو و بهينه سازي براي موتورهاي جستجو

 

سئو (انگليسي: SEO) به مفهوم بهينه سازي براي موتورهاي جستجو است. به صورت معمول اين موتور جستجو، گوگل در نظر گرفته مي‌شود. يك سئوكار با بررسي حوزه فعاليت شما و بررسي رقباي شما، براي وبسايت شما بر پايه اصول سئو برنامه ريزي خواهد نمود تا بتواند در كلمات كليدي هدف، شما را به نتايج مطلوب (يك) برساند. ديوار (بازار ديوار تهران) يكي از ارزشمندترين كسب و كارهاي فعال در ايران، علاوه بر دارا بودن برند و شناخته شده‌تر بودنش نسبت به سايت شيپور، با به كارگرفتن سئوكار حرفه اي، توانسته است سئو وبسايت خودش را بهبود دهد و از همين رو، علاوه بر جذب كاربر به دليل برند بودنش، مخاطباني نيز از گوگل به وبسايت خودش تزريق مي‌نمايد كه موجب پايداري ميزان سهم از بازار ديوار شده است.

 

تفاوتي ندارد كه شما در حال سئو براي كلمه «داستان» هستيد كه امثال و حكم نيز مي‌تواند در كنارش قرار بگيرد يا سئو براي كلمه «غرض از مزاحمت» كه در كنار «قرض از مزاحمت» جستجو مي‌شود كه مهم است براي هر دو كلمه سئو كنيد.

 

سئو

 

سئو چيست؟

سئو، بهينه سازي براي موتورهاي جستجو است تا بدين وسيله بتوانيم آن را در تحليل وبسايت خودمان ياري رسانيم  تا بتواند محتواي قرار گرفته بر بستر وبسايت ما را درك كنند و به هنگام جستجو كلمه‌اي مانند «غرض از مزاحمت» بدانند ما صفحه‌اي با عنوان املاي صحيح كلمات داريم كه در آن به شرح شكل صحيح غرض از مزاحمت پرداخته‌ايم.

 

اين روزها پيرامون سئو، عبارات زير جستجو مي‌شود:

 

اصول سئو: آگاهي بر مفاهيم On-page SEO & Off-page SEO، كمك شاياني به آگاهي از اصول سئو مي‌كند.

بازاريابي سئو چيست: آنچه به عنوان سئو چيست شرح داديم، پاسخ بازاريابي سئو چيست، نيز هست.

خدمات سئو

قيمت سئو

سئو چيست pdf

سئوكار كيست؟

سئوكار فردي است مجرب به اصول سئو كه سعي دارد با آگاهي بر آن‌ها، ديوار يا سايت خدمت از ما را سئو كند تا بتوانند رتبه يك بر روي كلمات كليدي كه مدنظرشان است را دريافت كنند.

 

استخدام سئو كار حرفه اي، با توجه به تعداد كم‌شان، فرايندي است كه به سادگي صورت نمي‌گيرد و بايد از ماهر بودن سئوكار كاملا آگاهي يابيد تا سئو سايت خودتان را به او بسپاريد.

 

سايت ديوار:

 

ديوار كه اينك زيرمجموعه كافه بازار است، يكي از برترين پلتفرم‌هاي ايران از منظر ارزش كسب و كار است. ديوار در شهرها متفاوتي فعاليت دارد كه از جمله آن‌ها مي‌توان به:

 

بازار ديوار تهران

سايت ديوار مشهد

ديوار اصفهان

ديوار قم

ديوار كرج

اشاره نمود. شما با دانلود ديوار من، به راحتي مي‌توانيد از ديوار بر روي موبايل خود بهره ببريد.

 

داستان:

 

داستان يكي از عباراتي است كه با وجود رقبايي قدرتمند كه داراي سوشال شيئر بسيار يا DA بالا هستند، سئو سختي دارد. به همين دليل يك سئوكار ماهر مي‌تواند با سئو براي اين كلمه، بر روي آن نتيجه بگيرد.

 

جالب است بدانيد پيرامون داستان، عبارات زير جستجو مي‌شود:

 

داستان آموزنده

داستان براي سخنراني

داستان كوتاه جالب

داستان كودكانه

داستان كوتاه عاشقانه

بهره از LSIهاي مرتبط با داستان، در اينجا عاملي بسيار مهم براي رتبه گيري مي‌تواند بشود.

 

غرض از مزاحمت را به چه شكل بايد نوشت:

 

غرض از مزاحمت يا قرض از مزاحمت، يكي از سوالات رايجي است كه پرسيده مي‌شود. شكل صحيح غرض از مزاحمت، قرض از مزاحمت است.

 

غرض از مزاحمت اينكه

شكل صحيح غرض از مزاحمت

غرض زا ماحمت چجوري نوشته ميشه

غرض از مزاحمت دسته يا قرض از مزاحمت

 

 

http://postbk.parsiblog.com/Posts/146

http://postbf.parsiblog.com/Posts/230

http://postcj.loxblog.com/post/151

http://postcu.blog.ir/post/135

http://postcq.blog.ir/post/125

http://postcl.loxblog.com/post/138

http://postcr.blog.ir/post/124

http://postbe.parsiblog.com/Posts/333

http://postcv.blog.ir/post/142

http://postcn.loxblog.com/post/137

http://postcs.blog.ir/post/135

http://postcm.loxblog.com/post/146

http://postct.blog.ir/post/124

http://postbd.parsiblog.com/Posts/231

http://postck.loxblog.com/post/140

 

 

تكنيك هاي سئو سايت براي موتورهاي جستجو در طراحي وب سايت

تكنيك هاي سئو سايت براي موتورهاي جستجو در طراحي وب سايت

  • تكنيك هاي سئو سايت براي موتورهاي جستجو در طراحي وب سايت

    سئو سايت برگرفته از عبارت Search Engine Optimization است كه كلمات معادلي چون SEO يا بهينه سازي سايت براي موتور جستجو دارد كه همگي آنها به يك معني مي باشند و مي توان آن را در طراحي سايت بصورت زير تعريف نمود:

    دوستاي عزيزم سئو (بهينه‌سازي سايت براي موتور جستجو) به معناي فريب و يا دستكاري موتور‌هاي جستجو با روش‌هاي غير اخلاقي نيست. درواقع آن‌ها براي كمك كردن به بهبود رويت و ارتباط وب سايت‌ها در نتايج جستجوي طبيعي با هدف رسيدن به رتبه‌بندي بالا، ايجاد شده‌اند.

    سئو سايت براي موتورهاي جستجو در طراحي وب سايت

    سئو را مي‌توان مجموعه‌اي از روش‌ها براي تغيير استراتژيك وب سايت‌ها دانست. اين فرآيند به بيان مهمترين عوامل مرتبط صفحه و افزايش اهميت آن در صفحه نتايج جستجو، مي‌پردازد.

    شروع سئو

    در اوايل سال 1990 اولين موتور‌هاي جستجو كار خود را آغاز كردند بعضي از محبوب‌ترين آن‌ها Infoseek،Alta Vista و Yahoo بودند.در آن زمان مردم موتورهاي جستجو را به ديد يك ليست فهرست شده نگاه مي‌كردند كه همانند صفحه زرد، سئو اوليه بر اساس حروف الفبا انجام مي‌شد. در اين ليست صفحاتي همچون AAA در بالاي اين ليست وجود داشتند.

    با رشد مداوم اينترنت موتورهاي جستجوي جديد‌تري ظاهر مي‌شدند كه از الگوريتم‌هاي رتبه‌بندي پيچيده‌تري استفاده مي‌كردند. اين الگوريتم‌ها با معيار تعداد دفعاتي كه يك كلمه كليدي يا يك عبارت در يك صفحه استفاده شده تقسيم بر تعداد كل كلمات صفحه و برچسب‌هاي شبيه key-words براي فهم محتويات وب سايت‌ها استفاده مي‌كردند. به دنبال اين رشد سئو براي بيشتر ديده شدن سايت‌ها فعاليت خود را شروع كرد. با توسعه رتبه‌بندي صفحات توسط موتور‌هاي جستجو، مهندسين سئو  براي سايت هاي اعم از طراحي سايت فروشگاهي، طراحي سايت رستوران، طراحي سايت گردشگري، طراحي سايت شركتي و بسياري موارد ديگر به دنبال پيدا كردن راه‌هايي جهت تاثيرپذيري در رتبه بندي اين موتورها چه با استفاده از روش‌هاي اخلاقي و چه غير اخلاقي روي آوردند..

    اهداف سئو 

    هدف سئو كمك به وب سايت‌ها در بدست آوردن محل بالا در نتايج جستجوي طبيعي و افزايش ارتباط بين صفحات و كلمات كليدي وارد شده توسط كاربران است. نمايش دادن بيشترين صفحات مرتبط با پرس‌و‌جوي جستجوي وارد شده داراي مزاياي زيادي هم براي كاربر و هم براي موتور جستجو است كه در آن كاربر بيشترين نتايج مرتبط جستجو شده را پيدا مي‌كند و موتور جستجو قابل اعتماد مي‌شود چرا كه الگوريتم آن بيشترين صفحات مرتبط را نشان مي‌دهد.

    بسته به اينكه چگونه كلمات كليدي رقابتي در بهينه سازي و سئو مورد استفاده قرار مي‌گيرند، سئو هفته‌ها يا ماه‌ها طول مي‌كشد تا به نتيجه برسد. اگر چه ممكن است نتايج بهينه‌سازي جستجو به سرعت ديده نشود ولي در دراز مدت مزاياي سئو باعث افزايش رتبه‌بندي سايت و افزايش بازديدكنندگان است. براي وب سايت‌ها خيلي مهم است كه در صفحه اول نتايج جستجو گوگل به خصوص جزو سه تا نتيجه طبيعي اول كه 58.4 درصد كليك‌ها را شامل مي‌شود، قرار گيرند.

    بطور كلي اهداف سئو را مي توان بصورت زير تقسيم بندي كرد:

    • در بازديد وب سايت تاثير بسزايي دارد.
    • باعث ايجاد برند مي شود.
    • باعث افزايش ترافيك سايت خواهد شد.
    • باعث شده وب سايت در صفحه نتايج موتور جستجو از رتبه بهتري برخوردار شد.
    • باعث افزايش فروش محصولات خواهد شد.
    • بهترين ابزار براي تبليغات است.

    سئو درون صفحه يا On Page SEO

    سئو درون صفحه به كنترل مستقيم كدها و يا محتويات وب سايت شما اعم از متن، تصوير، پيوند و … مرتبط مي‌شود؛ به طور كلي هر چيزي كه در سايت خود بارگذاري مي‌كنيد مربوط به SEO On Page مي‌شود. اين روش پايه تمام تلاش‌هاي بهينه‌سازي است زيرا جايي است كه شما بيشترين كنترل را روي آن داريد. هر گونه تغييري را كه شما در محتويات سايت خود ايجاد مي‌نماييد در نتايج جستجو تاثير گذار خواهد بود بنابراين خيلي مهم است كه روش SEO On Page بدرستي قبل از روش SEO Off Page انجام شود.

    سئو بيرون صفحه يا Off Page SEO

    بر خلاف روش SEO On Page كه توسعه وب سايت با كنترل مستقيم بالايي انجام مي‌شد، روش بهينه سازي بيرون صفحه شامل تمام ارتقاهايي است كه در خارج از وب سايت شما انجام مي‌شود اين شامل تمام چيزهايي است كه مي‌تواند در بدست آوردن رتبه‌بندي بالاي سايت شما كمك كند. SEO Off Page در درجه اول در بدست آوردن پيوندهايي كه از سايت‌هاي ديگر به سايت شما اشاره مي‌كنند متمركز مي‌شود سپس با استفاده از روش‌هايي كه در خارج از وب سايت انجام مي‌شود به بهينه‌سازي موتور جستجو مي‌پردازد.

    SEO Off Page يك فرآيند نامحدود است كه توسط مهندسين سئو در جهت بدست آوردن پيوند دهندگان، اداره مي‌شود.

    سئو كلاه سفيد يا White Hat

    به مجموعه تكنيك‌ها، روش‌ها و استراتژي‌هاي كه از قوانين و راهنمايي‌هاي موتورهاي جستجو تبعيت مي‌كنند، اشاره دارد. كه اين به معني فريب يا دستكاري موتور‌هاي جستجو و يا كاربران به هيچ وجه نيست. اين همچنين به سئو اخلاقي نيز ياد مي‌شود.

    سئو كلاه سياه يا Black Hat

    به مجموعه‌اي از دستورات دارد كه به منظور فريب، بازي و دستكاري الگوريتم‌هاي موتورهاي جستجو با هدف بدست آوردن رتبه‌بندي بالا، بكار مي‌رود. اين مهم است كه بدانيد اين‌ روش‌ها غير اخلاقي بوده و توسط هيچ موتور جستجويي تاييد نمي‌شود و بكارگيري اين روش‌ها خطر خارج شدن از فهرست پايگاه داده را براي هميشه در بر دارد.

    انجام تاكتيك‌هاي سئو كلاه سياه ممكن است كه باعث افزايش رشد ناگهاني در نتايج جستجو شود ولي مي‌تواند منجر به پرداخت جريمه و يا حذف كامل از فهرست پايگاه داده موتور جستجو شود.

    استراتژهاي سئو وب سايت بصورت زير:

    • بهبود ساختار سايت
    • استراتژي كلمات كليدي
    • استراتژي URL
    • بهينه سازي كد
    • پردازش كردن متن
    • بهينه سازي لينك هاي ورودي
    • استراتژي نام دامنه و هاست

    مهمترين معيارها براي بهينه سازي موتور جستجوعبارتند از:

    • اضافه كردن Allow يا DisAllow به نقشه سايت
    • اضافه كردن URL به نقشه سايت
    • اضافه كردن نقشه سايت به robots.txt
    • استفاده از ابزارهاي آناليز جهت crawl

    تكنيك هايي كه براي بهينه سازي و سئو سايت عنوان شده است عبارتند از:

    • افزايش لينك هاي خارجي
    • تغيير اسم فايل ها
    • لينك يك طرفه
    • كلمات كليدي
    • استفاده از Meta Tag
    • استفاده صحيح از عنوان
    • استفاده از robots.txt
    • بهينه سازي محتوا

    منبع: شركت سانا پرداز نارين

 

 براي توضيحات بيشتر و دانلود بر روي عنوان زير كليك كنيد

تكنيك هاي سئو سايت براي موتورهاي جستجو در طراحي وب سايت