Python web search

bs4 sürümü kullanımdadır. html ve xml dosyalarını internet üzerinden bilgisayarınıza indirip istediğiniz kısımları parçalamaya yarayan bir python modülü.

çeşitli yazılım ve metotlar ile hedef web sitelerinden içerik kopyalama * veya belli bilgileri alma işlemine verilen isim.

Web scraping yasal bir olaydır. İllegal olan kısmı dataların toplanması değil, toplandıktan sonra analiz etmek, veriyi anlamlandırmak ve kurumlara satılmasıdır. Web crawling doğru şekilde yapılmadığı sürece engellenebilirsiniz daha kötüsü karşı tarafı çökertebilirsiniz.