Mixnode

Mixnode

Mixnode, web'den veri ayıklamak ve analiz etmek için hızlı, esnek, büyük ölçüde ölçeklenebilir bir platformdur.Mixnode, web üzerindeki tüm kaynakları bir veritabanı tablosundaki satırlar olarak düşünmenizi sağlar;standart Yapısal Sorgu Dili'ni (SQL) kullanarak sorgulayabileceğiniz milyarlarca satır içeren dev bir veritabanı tablosu.Böylece, web tarayıcılarını / kazıyıcılarını çalıştırmak yerine, web'den her türlü ilginç bilgiyi almak için ultra esnek bir dilde basit sorgular yazabilirsiniz.
mixnode

İnternet sitesi:

Kategoriler

Mac için Mixnode'a alternatifler

grab-site

grab-site

grab-site, web sitelerini WARC dosyalarına arşivlemek için bir tarayıcıdır.Birden çok taramayı izlemek için bir gösterge tablosu içerir ve tarama sırasında URL yoksayma kalıplarının değiştirilmesini destekler.
Scrapy
ScrapeStorm
Heritrix
Darcy Ripper
ACHE Crawler
StormCrawler
Apache Nutch
Extracty
Norconex HTTP Collector