Google örümcek veya başka örümcekler benim sayfasını ziyaret olmadığını nasıl bilebilirim?
Ben oldukça iyi ama çok az bilgi olan bir web sitesi var.
Ben web siteleri örümcek ve bağlantıların bir listesini oluşturmak için PHPCrawl sınıfını kullanıyorum.
Bazı bira markası hakkında bir web sitesi oluşturulmuş ve yaş doğrulama sayfası eklemek zorunda kalmışlardır.
PHP web sitesinde Mac OSX Snow Leopard'ın Dashboard Widget 'Web Clip' yeniden inşa etmek için bir yolu var mı? bir paletli veya scraper.I gibi bir şey sayfa içeriğini almak için file_get_contents kullanarak düşündüm ...