産品介紹
《互聯網數據采集系統及數據采集實訓簡介》
《互聯網數據采集系統及數據采集實訓簡介》
互聯網數據采集系統及數據采集實訓
一.互聯網數據采集系統(私有化部署版)




  1.1 數據采集私有化部署版V7.0(服務器端)
 
  系統支持各主流電商網站數據信息采集,數據清洗,數據處理,數據存儲的教學(xué)實訓,并貼學(xué)院教學(xué)方向(xiàng),支持在電商商品
/評論等具體數據信息需求


  1.2 數據采集私有化部署版V7.0(學(xué)生端)

       1.2.1 采集模式:支持模闆采集,自定義采集
       1.2.2 流程圖模式:可視化操作,雙界面(miàn)展示采集過(guò)程
       1.2.3 采集任務:采集任務自定義,無采集任務限制,無采集數量限制,支持數據雲端存儲
       1.2.4 采集網址:支持手動輸入,從文件導入,批量生成(chéng),從任務導入
       1.2.5 采集内容:支持文本類數據采集,包括圖片,附件下載鏈接等數據信息
       1.2.6 導出數據:導出數據到本地,導出格式:Excel、Csv、Html
       1.2.7 導出到數據庫:無數量限制,支持發(fā)布到本地和雲端服務器,支持類型:MySQL、SqlServer、MongoDB、Oracle
       1.2.8 數據處理:替換、正則表達式替換、正則表達式匹配、去除空格、添加前綴、添加後(hòu)綴、日期時間格式化、Html轉碼、字段合并
       1.2.9 條件采集功能(néng):根據條件組合精準化采集需求數據線信息
       1.2.10 預登錄采集:采集需要登錄才能(néng)查看内容的網址
       1.2.11 定時采集:支持按每周/每天/實時定時采集
       1.2.12 循環采集:無時間間隔,采集頻率自定義設置
       1.2.13 支持代理IP切換:官方優質代理(另售)和自定義代理
                  切換方式:按時間切換/按文本切換
       1.2.14 驗證碼自動識别:支持滑動驗證碼自動識别和手動打碼,支持圖片驗證碼自動識别和自動打碼(另售)
       1.2.15 觸發(fā)器功能(néng):丢棄本條數據、結束本次采集、跳出循環等自定義功能(néng)


       1.2.16 脫機采集:支持采集任務拆分雲節點運行,滿足關機時仍可采集
       1.2.17 并發(fā)采集:多節點支持,將(jiāng)單個采集任務拆分成(chéng)子任務,并發(fā)執行
       1.2.18 增量采集:支持隻采集新增的數據内容
       1.2.19 API接口支持:通過(guò)我們提供的接口,快速實現數據采集與歸檔
       1.2.20雲節點管理:支持任務和雲節點管理,合理有效地利用雲節點,并進(jìn)行任務管理
       1.2.21子賬号管理:私有雲支持在主賬号下添加子賬号,共享主賬号節點及權限資源




二. 數據采集實訓案例
   2.1 通用類電商數據采集教學(xué)實訓案例
   2.2 電商商品列表類數據采集教學(xué)實訓案例
   2.3 電商商品評論類數據采集教學(xué)實訓案例

   以上三個實訓案例每一套實訓案例包含6個行業真實項目案例(含天貓,淘寶,京東,亞馬遜等網站平台),每個案例包括教學(xué)課件,指導文檔,視頻教學(xué),采集規則,案例數據等整套資源

   2.4 教學(xué)需求定制化項目實訓案例

  專屬定制化教學(xué)案例,符合專業教學(xué)特色需求
 
企業文化
 
聯系我們
廣州鉑和信息科技有限公司

手機:18929576650
地址: 廣州市南沙區豐澤東路106号

網站:www.gzbytech.com

Copyright 2016-2020
其它>>
  • 人才招聘

Copyright © 廣州鉑和信息科技有限公司  

本站部分圖文來源網絡,如有侵權問題請通知我們處理!