如何抓取某個網頁上的目錄下的所有數據

用火車頭采集器（）之類的采集工具就可以，采集頁面，自動下載圖片。（但使用要求懂點html、js和正則表達式）先分析列表頁，取得所有書的內容頁，再從內容頁中獲取需要的每一個內容，圖片、價格、作者什么的。這是個標準的采集流程。火車頭免費版采集的內容是采到access里的

恒山ssl適用于網站、小程序/APP、API接口等需要進行數據傳輸應用場景，ssl證書未來市場廣闊！成為創新互聯的ssl證書銷售渠道，可以享受市場價格4-6折優惠！如果有意向歡迎電話聯系或者加微信：18982081108（備注：SSL證書合作）期待與您的合作！

如何利用采集工具采集數據修改后發布到個人網站？

可以試著用一下前嗅ForeSpider采集軟件，不需要更改軟件本身，只要在里面配置一些規則，大部分都是可視化操作的，軟件底層為C++，采集速度和性能都是很不錯的，而且免費版的不限制任何功能（數據量大的話也可以購買付費的），免費版的每天都有1000條可以用，而且支持MySQL、SqlServer等主流數據庫的同時，也有自己的非關系型數據庫ForeLib，可以采集將采集下來的數據，放到數據庫里面，再處理數據，手動處理之后，通過接口調用數據庫的數據，傳輸到自己的網站就可以了。

火車頭采集速度，如何設置的慢點，因為采集太快會出現采集空信息？

一般程序中都有這樣的采集間隔控制。仔細找找。不熟悉這個軟件，但在熊貓采集里面，是嚴格控制采集速度的。

采集到的信息發布到遠程SQLSERVER里面，一般的采集軟件都會具有該功能。但需要你設置好你的遠程SQL SERVER數據的參數：IP（端口），庫名、用戶名、密碼。有些傳統采集軟件是先將信息采集到本地緩存，再發布到遠程數據庫內。但熊貓采集不是這樣，采集的結果是直接存儲到遠程數據庫內的。

請問網頁數據采集需要哪些技術

asp或者asp.net是需要服務器支持xmlhttp組件的

php有個fopen選項 要把它改成true

這兩個是通過你的網站自己采集 是需要服務器支持

不過你也可以通過一些本地程序采集。。就是讓你的計算機自動給你的網站采集添加文章 軟件比較NB的就是火車頭。。。本人經常用這個吧某網站的東西采集到另一個網站 弄的這個網站的內容亂七八糟。。。已達到干壞事的目的

對你你個人熟悉html代碼就可以 其實不用太熟悉。。。知道一點就成

比如網站的html代碼給你 你能找到里面那些內容是你需要采集的,那些不用就行。。。其實很簡單。。。個人也就學了幾分鐘就會了

請問這種網頁我怎么采集到內容啊？

網頁采集專家 1.2.114

軟件大小：2.57 MB

軟件語言：簡體中文

軟件類別：國產軟件 / 試用版 / 網絡輔助

運行環境：Win9x/Me/NT/2000/XP/2003

添加時間：2006-12-21 10:15:07

更新時間：2006-12-21 10:15:07

軟件添加：supermini

軟件評級：

會員級別：匿名用戶

聯 系 人：skytck@163.com

開 發 商：

下載統計：本日：0 本周：0 本月：0 總計：0

軟件簡介：

網頁采集專家》軟件是目前國內外最先進的信息采集軟件，可以將因特網上的網站信息保存到用戶的本地數據庫中。適合任何access2000或sqlserver2000數據庫。它和一些同類軟件相比，具有：

1、兼容性強：“采集方”和“被采集方”都能適合任何網站，沒有模版限制，能自動分析數據表和字段，甚至可以突破登陸限制。

2、采集速度快：目標搜索速度可達10萬條/時，采集速度可達3-4萬篇/時，而其他產品最多只能達到5000篇/時。

3、不受空間的連接數限制。

4、操作簡便：只要觀看一次教程，即可操作。可以保存配置和導入配置。

5、純綠色軟件，大小只有2.5M。

6、價格便宜：正式版只要300元，價格是其他產品的1/10。300元的價格=30000元的價值！

并具備以下功能：

1、連接數據庫：連接數據庫就像打開一個普通文檔一樣簡單。

2、分析數據庫：連接后，軟件能自動分析您數據庫的數據表和字段，即使不懂數據庫的人也可以操作。

3、獲取目標：有手動、半自動、全自動三種方式可供選用，獲取有效目標URL方便快捷。

4、數據保存：數據邊采集邊自動保存到您的數據庫中。

5、斷點續采：信息采集任務可以在中斷后手動導出URL列表，導入后可從斷點開始繼續采集。

6、文件下載：可以“遠程抓圖”將采集到的圖片、SWF等下載保存到本地磁盤中。

7、結果分類：可以根據用戶定義的分類信息進行采集結果的自動分類。

8、結果替換：可以將采集的結果根據規則替換成你定義的內容。

9、網站登錄： 支持網站登錄，并支持網站Cookie，即使需要驗證碼才能登錄的網站也能輕松穿過。

10、瀏覽數據：直接可以瀏覽數據庫里的每條記錄。

11、執行SQL：通過執行SQL查詢語句，直接操縱數據庫，功能強大，無所不能。

;sID=0

網絡采集工具，可以把數據放到數據庫中的

通用的采集軟件都可以進行采集數據的發布，介紹三款軟件，自己選擇：

網絡神采 共享版 采集規則自定義，可采集任意網站數據。可發布access、mssql、mysql，付費后還可發布到oracle。但網絡神采共享版對采集任務數據由最大限制，好像是只能采集300條數據，用起來很不爽，其他的版本價格個人認為偏高。

火車頭 免費版 采集規則配置起來略微復雜，也可發布access、sqlserver、mysql及oracle。但免費版受限較大，此方面可以參看 進行版本功能比較。

Soukey采摘 唯一一款開源免費的軟件，功能與火車頭網絡神采類似 ，支持采集規則自定義，在此方面與火車頭網絡神采類似，數據庫發布支持Access、sqlserver及Mysql。如果具備一定的技術基礎，建議使用soukey采摘，靈活不受限制，可以針對自己的網站規則進行修正。源代碼可在 下載。

我個人采集經驗，采集的數據一般很難滿足數據庫要求規則，一般都需要進行數據加工，或者采用web方式發布數據。所以，建議選擇可以帶有一定數據加工的采集軟件，會很方便的。