網(wǎng)絡礦工數(shù)據(jù)采集軟件是一款面向專業(yè)采集用戶的采集軟件 ,提供了數(shù)據(jù)采集、加工、發(fā)布一體化的解決方案,具備強大的采集能力,實現(xiàn)了可視化、智能化的規(guī)則配置,免去了傳統(tǒng)規(guī)則配置的煩惱。需Microsoft .NetFramework2.0環(huán)境。
網(wǎng)絡礦工采集器圍繞網(wǎng)站數(shù)據(jù)采集提供了豐富的功能,雖然功能眾多,但使用卻不復雜。網(wǎng)絡礦工上手很容易。
網(wǎng)絡礦工主要包括了以下幾個方面的功能:
1、數(shù)據(jù)采集:以數(shù)據(jù)采集為核心提供了導航、多頁、代理采集、跨層采集、文件下載、編碼解碼、參數(shù)配置等功能,確保在數(shù)據(jù)采集時可應對各種復雜的采集配置需求;2、強大的采集能力:支持各種編碼、壓縮采集,可實現(xiàn)U碼轉換、HTML代碼轉換,支持cookie、自定義HTTP Header,支持代理輪詢、采集延時等多種設置,支持各種排重