المصدر لمحلل robots.txt

جوجل تفتح المصدر لمحلل robots.txt الخاص بها في Java وإطار الاختبار في C++

فتحت شركة Google خلال السنة الماضية المصدر التحليلي المرتبط بشفرة robots.txt، وهذا المصدر استخدمته الشركة خصوصاً في أنظمة الإنتاج الخاصة…