工業數據采集類型

互聯網的數據主要來自於互聯網用戶和服務器等網絡設備，主要是大量的文本數據、社交數據以及多媒體數據等，而工業數據主要來源於機器設備數據

、工業信息化數據和產業鏈相關數據。

從(cong)數(shu)據(ju)采(cai)集(ji)的(de)類(lei)型(xing)上(shang)看(kan)，不(bu)僅(jin)要(yao)涵(han)蓋(gai)基(ji)礎(chu)的(de)數(shu)據(ju)，還(hai)將(jiang)逐(zhu)步(bu)包(bao)括(kuo)半(ban)結(jie)構(gou)化(hua)的(de)用(yong)戶(hu)行(xing)為(wei)數(shu)據(ju)，網(wang)狀(zhuang)的(de)社(she)交(jiao)關(guan)係(xi)數(shu)據(ju)，文(wen)本(ben)或(huo)音(yin)頻(pin)類(lei)型(xing)的(de)用(yong)戶(hu)意(yi)見(jian)和(he)反(fan)饋(kui)數(shu)據(ju)
，設(she)備(bei)和(he)傳(chuan)感(gan)器(qi)采(cai)集(ji)的(de)周(zhou)期(qi)性(xing)數(shu)據(ju)，網(wang)絡(luo)爬(pa)蟲(chong)獲(huo)取(qu)的(de)互(hu)聯(lian)網(wang)數(shu)據(ju)
，以(yi)及(ji)未(wei)來(lai)越(yue)來(lai)越(yue)多(duo)有(you)潛(qian)在(zai)意(yi)義(yi)的(de)各(ge)類(lei)數(shu)據(ju)。主(zhu)要(yao)包(bao)括(kuo)以(yi)下(xia)幾(ji)種(zhong)：

• 海量的Key-Value數據

在傳感器技術飛速發展的今天，包括光電、熱敏、氣敏、力敏
、磁敏、聲敏
、濕敏等不同類別的工業傳感器在現場得到了大量應用，而且很多時候機器設備的數據大概要到ms的精度才能分析海量的工業數據
，因此，這部分數據的特點是每條數據內容很少，但是頻率極高。

• 文檔數據

包括工程圖紙

、仿真數據、設計的CAD圖紙等，還有大量的傳統工程文檔。

• 信息化數據

由工業信息係統產生的數據，一般是通過數據庫形式存儲的，這部分數據是最好采集的。

• 接口數據

由已經建成的工業自動化或信息係統提供的接口類型的數據，包括txt格式、JSON格式、XML格式等。

• 視頻數據

工業現場會有大量的視頻監控設備
，這些設備會產生大量的視頻數據。

• 圖像數據

包括工業現場各類圖像設備拍攝的圖片（例如，巡檢人員用手持設備拍攝的設備、環境信息圖片）。

• 音頻數據

包括語音及聲音信息（例如，操作人員的通話
、設備運轉的音量等）。

• 其他數據

例如遙感遙測信息
、三維高程信息等等。

數據采集的方法

傳統的數據采集方法包括人工錄入
、調查問卷、dianhuasuifangdengfangshi，dashujushidaidaolaihou，yigetuchudebianhuashishujucaijidefangfayoulezhidefeiyue，xiamiansuojieshaodeshujucaijifangshidetupozhijiegaibianzhedashujuyingyongdechangjing。

1、傳感器

chuanganqishiyizhongjiancezhuangzhi，nengganshoudaobeiceliangdexinxi，bingnengjiangjianceganshoudaodexinxi
，anyidingguilvbianhuanchengweidianxinhaohuoqitasuoxuxingshidexinxishuchu，yimanzuxinxidechuanshu、處理、存儲、顯示、記錄和控製等要求。在生產車間中一般存在許多的傳感節點，24小時監控著整個生產過程，當發現異常時可迅速反饋至上位機，可以算得上是數據采集的感官接受係統

，屬於數據采集的底層環節。

傳感器在采集數據的過程中主要特性是其輸入與輸出的關係。

qijingtaitexingfanyinglechuanganqizaibeicelianggegezhichuyuwendingzhuangtaishideshuruheshuchuguanxi
，zheyiweizhedangshuruweichangliang
，huobianhuajimanshi，zheyiguanxijiuchengweijingtaitexing。womenzongshixiwangchuanganqideshuruyushuchuchengweiyideduizhaoguanxi
，zuihaoshixianxingguanxi。

一般情況下，輸入與輸出不會符合所要求的線性關係，同時由於存在這遲滯
、rubiandengyinsudeyingxiang，shishurushuchuguanxideweiyixingyebunengshixian。yinciwomenbunenghushigongchangzhongdewaijieyingxiang
，qiyingxiangchengduqujueyuchuanganqibenshen，ketongguochuanganqibenshendegaishanjiayiyizhi，youshiyekeyijiaduiwaijietiaojianjiayixianzhi。

2
、RFID技術

RFID（Radio Frequency Identification
，射頻識別）技(ji)術(shu)是(shi)一(yi)種(zhong)非(fei)接(jie)觸(chu)式(shi)的(de)自(zi)動(dong)識(shi)別(bie)技(ji)術(shu)，通(tong)過(guo)射(she)頻(pin)信(xin)號(hao)自(zi)動(dong)識(shi)別(bie)目(mu)標(biao)對(dui)象(xiang)並(bing)獲(huo)取(qu)相(xiang)關(guan)的(de)數(shu)據(ju)信(xin)息(xi)。利(li)用(yong)射(she)頻(pin)方(fang)式(shi)進(jin)行(xing)非(fei)接(jie)觸(chu)雙(shuang)向(xiang)通(tong)信(xin)，達(da)到(dao)識(shi)別(bie)目(mu)的(de)並(bing)交(jiao)換(huan)數(shu)據(ju)。RFID技術可識別高速運動物體並可同時識別多個標簽

，操作快捷方便。

在工作時，RFID讀寫器通過天線發送出一定頻率的脈衝信號，當RFID標簽進入磁場時，憑借感應電流所獲得的能量發送出存儲在芯片中的產品信息（Passive Tag

，無源標簽或被動標簽），或者主動發送某一頻率的信號（Active Tag
，有源標簽或主動標簽）。

閱讀器對接收的信號進行解調和解碼然後送到後台主係統進行相關處理；主係統根據邏輯運算判斷該卡的合法性，針對不同的設定做出相應的處理和控製，發出指令信號控製執行機構動作。

RFID技術解決了物品信息與互聯網實現自動連接的問題
，結合後續的大數據挖掘工作
，能發揮其強大的威力。

數據采集技術難點

在zai當dang今jin的de製zhi造zao業ye領ling域yu，數shu據ju采cai集ji是shi一yi個ge難nan點dian。很hen多duo企qi業ye的de生sheng產chan數shu據ju采cai集ji主zhu要yao依yi靠kao傳chuan統tong的de手shou工gong作zuo業ye方fang式shi，采cai集ji過guo程cheng中zhong容rong易yi出chu現xian人ren為wei的de記ji錄lu錯cuo誤wu且qie效xiao率lv低di下xia。

有(you)些(xie)企(qi)業(ye)雖(sui)然(ran)引(yin)進(jin)了(le)相(xiang)關(guan)技(ji)術(shu)手(shou)段(duan)
，並(bing)且(qie)應(ying)用(yong)了(le)數(shu)據(ju)采(cai)集(ji)係(xi)統(tong)
，但(dan)是(shi)由(you)於(yu)係(xi)統(tong)本(ben)身(shen)的(de)原(yuan)因(yin)以(yi)及(ji)企(qi)業(ye)沒(mei)有(you)選(xuan)擇(ze)最(zui)適(shi)合(he)自(zi)己(ji)的(de)數(shu)據(ju)采(cai)集(ji)係(xi)統(tong)，因(yin)此(ci)也(ye)無(wu)法(fa)實(shi)現(xian)信(xin)息(xi)采(cai)集(ji)的(de)實(shi)時(shi)性(xing)、精確性和延伸性管理，各單元出現了信息斷層的現象。

技術難點主要包括以下幾方麵：

1、數據量巨大

任何係統，在不同的數據量麵前
，需要的技術難度都是完全不同的。

如果單純是將數據采到，可能還比較好完成，但采集之後還需要處理，因為必須考慮數據的規範與清洗
，因為大量的工業數據是“髒”數據，直接存儲無法用於分析，在存儲之前


，必須進行處理，對海量的數據進行處理，從技術上又提高了難度。

2、工業數據的協議不標準

互聯網數據采集一般都是我們常見的HTTP等協議，但在工業領域，會出現ModBus、OPC、CAN
、ControlNet
、DeviceNet

、Profibus
、Zigbee等deng等deng各ge類lei型xing的de工gong業ye協xie議yi
，而er且qie各ge個ge自zi動dong化hua設she備bei生sheng產chan及ji集ji成cheng商shang還hai會hui自zi己ji開kai發fa各ge種zhong私si有you的de工gong業ye協xie議yi，導dao致zhi在zai工gong業ye協xie議yi的de互hu聯lian互hu通tong上shang
，出chu現xian了le極ji大da地di難nan度du。

很多開發人員在工業現場實施綜合自動化等項目時，遇到的最大問題及時麵對眾多的工業協議，無法有效的進行解析和采集。

3、視頻傳輸所需帶寬巨大

傳統工業信息化由於都是在現場進行數據采集，視頻數據傳輸主要在局域網中進行
，因此，帶寬不是主要的問題。

但dan隨sui著zhe雲yun計ji算suan技ji術shu的de普pu及ji及ji公gong有you雲yun的de興xing起qi
，大da數shu據ju需xu要yao大da量liang的de計ji算suan資zi源yuan和he存cun儲chu資zi源yuan，因yin此ci工gong業ye數shu據ju逐zhu步bu遷qian移yi到dao公gong有you雲yun已yi經jing是shi大da勢shi所suo趨qu了le。但dan是shi，一yi個ge工gong業ye企qi業ye可ke能neng會hui有you幾ji十shi路lu視shi頻pin，成cheng規gui模mo的de企qi業ye會hui有you上shang百bai路lu視shi頻pin，這zhe麼me大da量liang的de視shi頻pin文wen件jian如ru何he通tong過guo互hu聯lian網wang順shun暢chang到dao傳chuan輸shu到dao雲yun端duan，是shi開kai發fa人ren員yuan需xu要yao麵mian臨lin的de巨ju大da挑tiao戰zhan。

4、對原有係統的采集難度大

在工業企業實施大數據項目時
，數據采集往往不是針對傳感器或者PLC，而是采集已經完成布署的自動化係統上位機數據。

這zhe些xie自zi動dong化hua係xi統tong在zai部bu署shu時shi廠chang商shang水shui平ping參can差cha不bu齊qi，大da部bu分fen係xi統tong是shi沒mei有you數shu據ju接jie口kou的de，文wen檔dang也ye大da量liang缺que失shi，大da量liang的de現xian場chang係xi統tong沒mei有you點dian表biao等deng基ji礎chu設she置zhi數shu據ju，使shi得de對dui於yu這zhe部bu分fen數shu據ju采cai集ji的de難nan度du極ji大da。

5
、安全性考慮不足

原先的工業係統都是運行在局域網中
，安全問題不是突出考慮的重點。

一旦需要通過雲端調度工業之中最為核心的生產能力


，又沒有對安全的充分考慮，造成損失，是難以彌補的。