سئوي robots.txt، مثالي بزرگ براي جستجوگرها: اگر دقت كرده باشيد، فايل robots.txt معمولاً در شاخه هاي اصلي فايل هاي وب سايت شما وجود دارند. بگذاريد همين ابتدا خيالتان را راحت كنم. اين فايل مستقيماً بر رروي سئوي وب سايت شما تاثير مي گذارد. پس اگر تابحال به آن اهميت نميداديد، از اين پس بايد نگران صحت محتواي آن شويد. اين فايل مشخص مي كند كه جستجوگرهايي مثل گوگل چگونه و به چه شكل چه دسترسي هايي به چه قسمت هايي از وب سايت شما داشته باشند. همانگونه كه از نامش پيداست، اين فايل ربات هاي موتورهاي جستجوگر را هدايت مي كند تا به آن چه شما مشخص كرده ايد دستيابي داشته باشند. در اين نوشته سعي بر آن داريم تا مشخص كنيم چطور اين فايل مي تواند به بهترين شكل تغيير يابد و تا آن جا كه ممكن است به سئوي وب سايت شما و ايندكس محتوايتان كمك كند. با طراحي سايت تي اچ ديزاينر همراه باشيد.
از اين به بعد گوگل به سايت شما هم اشاره مي كند
گوگل ديگر كودكي نيست كه فقط به محتواي html سايت شما دقت كند و آن را در حالي كه شما از ديگر تكنولوژي هايي مثل جاوا اسكريپت و … استفاده مي كنيد ناديده بگيرد و تمامي محتواهاي تمام صفحات شما را بيرون بكشد. گوگل فقط به دستور شما صفحاتي مشخص را مورد دسترسي قرار مي دهد. اگر به آن بگوييد صفحاتي مثل بك اند وب سايتتان را ايندكس نكند، او به شما احترام مي گذارد و اين كار را انجام نمي دهد. بله، به واسطه فايل robots. اين قضيه از الگوريتم پانداي گوگل شروع شد و به راحتي مي توان به آن اشاره كرد كه هرگز فايل هاي سي اس اس يا جاوا اسكريپت شما را مورد بررسي قرار ندهد. اگر از افزونه يوآست در سئوي وب سايت وردپرسي خود استفاده مي كنيد، پيشنهاد مي كنيم به نوشته نحوه افزودن كلمه كليدي و توضيحات متا در وردپرس نيز نگاهي بياندازيد.
yoast در رابطه با سئوي robots.txt چه مي گويد؟
جالب است بدانيد كه يوآست كه بهترين افزونه سئوي وردپرس را ارائه داده است، خود در سئوي robots.txt مخالف بلاك كردن بسياري از مواردي است كه در اين فايل بصورت ديفالت بلاك مي شوند. يكي از كارشاسان وب سايت يوآست پس از بررسي طراحي وب سايت تي اچ ديزاينر، مي گويد: هم اكنون وب سايت هاي خود ما هيچ چيز را در فايل ربات وردپرس بلاك نمي كند. ما حتي ترجيح مي دهيم تا دايركتوري هايي مثل plugins يا includes كاملاً كرال شوند، زير بسياري از آن ها صفحات اي جكس يا جاوااسكريپتي دارند كه نياز است تا محتوايشان كه به وردپرس شما مرتبط است را در دسترس ربات ها قرار دهند.
بازدید :