單機遊戲下載單機遊戲下載基地
最新遊戲|熱門遊戲|遊戲大全|遊戲專題
網頁瀏覽下載工具FTP工具聊天工具網絡共享廣告攔截即時通訊視頻聊天郵件客戶端網盤工具
當前位置：首頁 → 網絡工具 → 網絡共享 → 網絡爬蟲軟件(nwebcrawler) v1.0.1 綠色版

網絡爬蟲軟件(nwebcrawler) v1.0.1 綠色版

  • 網絡爬蟲軟件(nwebcrawler)截圖0
< >
網絡爬蟲軟件(nwebcrawler)下載
好玩 好玩 0
坑爹 坑爹 0
  • 應用語言：中文
  • 應用大小：177KB
  • 更新時間：2015-06-25 16:11
  • 發行時間：
  • 應用類型：普通
  • 應用標簽： 網頁抓取
網絡爬蟲軟件nwebcrawler是一款小巧實用，操作簡單，功能強大的免費多線的網頁信息抓去工具，采用開源，C#開發的網絡爬蟲程序。網絡爬蟲軟件nwebcrawler功能十分的強大與全麵，所有也被網友稱為螞蟻、自動索引、模擬程序、網頁蜘蛛、網頁機器人等等。該軟件適用[更多]
大小：177KB
應用介紹

網絡爬蟲軟件(nwebcrawler)是一款小巧實用，操作簡單，功能強大的免費多線的網頁信息抓去工具，采用開源，C#開發的網絡爬蟲程序。網絡爬蟲軟件(nwebcrawler)功能十分的強大與全麵，所有也被網友稱為螞蟻、自動索引、模擬程序、網頁蜘蛛、網頁機器人等等。該軟件適用於的範圍相當的廣泛，常被用戶用於網站的優化。

網絡爬蟲軟件(nwebcrawler)簡介：

NwebCrawler是用C#寫的一款多線程網絡爬蟲程序，它的實現原理是先輸入一個或多個種子URL到隊列中，然後從隊列中提取URL(先進先出原則)，分析此網頁尋找相應標簽並獲得其href屬性值，爬取有用的鏈接網頁並存入網頁庫中，其中用爬取曆史來記錄爬過的網頁，這樣避免了重複爬取。提取URL存入隊列中，進行下一輪爬取。所以NwebCrawler的搜索策略為廣度優先搜索。采用廣度優先策略有利於多個線程並行爬取而且抓取的封閉性很強。

網絡爬蟲軟件(nwebcrawler)主要功能：

可配置：線程數，等待時間，連接超時，允許MIME類型和優先級，下載文件夾。

統計信息：URL數量，總下載文件，總下載字節數，CPU利用率和可用內存。

Preferential crawler：用戶可以設置優先級的MIME類型。

Robust: 10+ URL normalization rules, crawler trap avoiding rules

 

相關應用
相關攻略
下載地址

網絡爬蟲軟件(nwebcrawler) v1.0.1 綠色版

    熱門評論

    最新評論

    發表評論 查看所有評論(0)

    昵稱:
    表情: 高興 可 汗 我不要 害羞 好 下下下 送花 屎 親親
    (您的評論需要經過審核才能顯示)

    配置需求

    推薦專題

    2020支付寶五福圖片素材2020支付寶五福圖片素材

    本類下載排行

    關於飛翔 | 聯係我們 | 大事記 | 下載幫助(？) | 廣告聯係 | 版權聲明 | 網站地圖 | 友情鏈接

    Copyright 2010-2013 單機遊戲下載 (R) 版權所有 飛翔下載所有遊戲及軟件下載資源來源互聯網，並由網友上傳分享。如有侵權，請來電來函告之。
    飛翔忠告：抵製不良色情、反動、暴力遊戲 合理安排遊戲時間 享受健康生活 鄂公網安備：42011102003115號 【鄂ICP備13011873號-1】