♥BO'LIM: Web sayt sozlamalari

♥KATEGORYA: robots. txt
★Mavzu: robots.txt haqida.
→
robots.txt bu saytni qidiruv sistemalarida chiqaradigan fayllardan biri bo'lib u yordamida google, yandex, yoki boshqa qidiruv saytlaridan kirgan robotlar saytni ko'ra oladi. misol uchun saytingiz googleda umuman ko'rinishini xoxlamasangiz ushbu fayl yordamida yopib qo'ya olasiz. yoki bo'lmasa birorta secret bo'limingiz bo'lsa u qidiruvda aks etmaydi. keyingi darslarda robots.txt faylini tuzishni ko'rib chiqamiz.