iPAS 備考專區 登入

iPAS AI 應用規劃師 中級 科目二 大數據處理分析與應用・114 年第二次・L22・第 19 題

IoT 感測器兼顧即時性、完整性、可擴展性,哪種架構最合適?

原題

某製造企業導入上萬台物聯網(IoT)感測器以進行設備健康監測。系統需在毫秒級回應異常事件,並同時將完整資料保留於雲端供後續 AI 模型訓練與分析。若企業希望兼顧即時性、資料完整性與可擴展性,下列哪一種資料流程設計最符合此目標?

白話

製造企業有上萬台 IoT 感測器要監控。系統同時有三個要求:毫秒級即時回應異常、完整資料要存到雲端給 AI 訓練用、系統要能擴展到更多感測器。

問你:哪一種資料流程架構能同時滿足毫秒級即時性、資料完整性和可擴展性?

一句話總結

三個同時滿足的關鍵:邊緣運算節點(解決毫秒級即時性)→ 流式資料處理(在資料流動時就分析)→ 雲端資料湖(保留完整資料供 AI 訓練),這是現代工業 IoT 架構的標準設計。

情境

先感受問題:三個要求,選項 A 只能同時滿足一個

東嶸製造導入了 10,000 台生產設備感測器,每台每 100 毫秒回傳一次溫度和震動資料。

IT 架構師立偉面對三個要求:

要求 1:毫秒級即時性:設備異常要在 500 毫秒內觸發停機警報,避免設備損壞。

要求 2:資料完整性:所有歷史感測器資料要完整保留,供未來訓練預測性維護模型。

要求 3:可擴展性:未來可能增加到 50,000 台感測器,系統架構要能橫向擴展。

這三個要求的困難在於:

要即時,資料就得在「靠近設備的地方」就處理,不能先傳到遠端雲端再計算(網路延遲太高)。

要完整性,所有原始資料都得傳到雲端儲存,不能在本地就丟掉。

要可擴展,架構不能是單機,必須是分散式、可水平擴展的設計。

舊方法

不同架構為什麼分別只能滿足部分要求

  1. 直接傳雲端的延遲問題:感測器 → 雲端 API Gateway → 分析,中間需要網路往返(Round-Trip Time),即使光纖也需要 10-50 毫秒,加上雲端處理時間,毫秒級回應幾乎做不到。設備異常時,警報已經來不及。
  2. 批次處理的延遲問題:批次特徵工程(Batch Feature Engineering)是累積一段時間的資料後一起計算,天然無法達到毫秒級響應。用在事後分析很好,但不適合即時監控。
  3. 資料倉儲不適合存原始感測器資料:資料倉儲(Data Warehouse)設計給結構化的商業智慧查詢,不適合存儲每 100 毫秒一筆的高頻時序原始資料。資料湖(Data Lake)才能以低成本存儲大量原始格式資料。
  4. RESTful API 的吞吐量瓶頸:RESTful API 每個請求需要建立 HTTP 連線,10,000 台設備每 100 毫秒各發一個請求,每秒 100,000 個 HTTP 請求,API Gateway 很快就達到瓶頸。MQTT 或 Kafka 等訊息協定設計來處理這種高頻連接。
  5. 無法同時做即時和事後分析:如果架構只設計了「即時路徑」(本地邊緣計算但不存雲端),就無法用完整歷史資料做 AI 模型訓練;如果只設計了「批次路徑」(存到雲端但不在本地即時計算),就達不到毫秒級響應。

新方法

三層架構:邊緣即時 + 流式處理 + 雲端資料湖

東嶸製造立偉設計的架構分三層:

第一層:感測器 → 邊緣運算節點

每個廠區有一台邊緣計算伺服器,接收附近幾百台感測器的資料。邊緣節點在本地就做初步計算,不需要先傳到雲端,網路延遲從 50ms 降到 1-2ms。

第二層:邊緣節點 → 流式資料處理框架(Stream Processing Framework)

使用 Apache Flink 或 Apache Kafka Streams,在資料「流動的當下」做異常偵測計算(例如:滑動視窗內溫度均值超閾值),觸發毫秒級警報。同時,這層也把資料串流分成兩路:一路送到即時告警,另一路傳到雲端儲存。

第三層:流式處理 → 雲端資料湖(Data Lake)→ 模型推論和訓練

所有原始感測器資料完整傳到雲端資料湖(如 AWS S3、Azure Data Lake)長期保存,供後續 AI 模型訓練用。

這就是選項 C 講的:感測器 → 邊緣運算節點 → 流式資料處理框架(Stream Processing Framework)→ 雲端資料湖 → 模型推論。

錯選項

為什麼其他選項是錯的

A感測器 → 雲端 API Gateway → 分散式資料庫 → 批次特徵工程(→ 模型推論)

字面在說什麼

資料先傳到雲端,存進分散式資料庫,再用批次方式做特徵工程。

為什麼不對

「批次特徵工程」天然有時間延遲,無法達到毫秒級即時響應。而且所有資料都先傳到雲端 API Gateway,網路延遲加上雲端計算時間,不可能做到毫秒級警報。這個架構適合事後分析,不適合即時監控。

誰會選錯

習慣「雲端集中式架構」,沒有邊緣運算概念的人。傳統 IT 架構是「所有資料送到中央處理」,但 IoT 即時監控需要「在靠近資料源的地方先處理」。

B感測器 → MQTT Broker → 雲端資料倉儲 → 即時儀表板 → 模型再訓練

字面在說什麼

用 MQTT 收集資料,存到雲端資料倉儲,再用儀表板顯示。

為什麼不對

幾個問題:(1) 資料倉儲(Data Warehouse)設計給結構化查詢分析,不適合高頻原始感測器資料存儲,應用資料湖(Data Lake);(2) 「即時儀表板」是展示工具,不是異常偵測計算邏輯;(3) 缺少邊緣運算層,所有資料傳到雲端才處理,無法達到毫秒級響應。儀表板是「給人看的」,不是「觸發警報的」。

誰會選錯

知道 MQTT 是 IoT 協定,就覺得方向對了,沒有仔細審視「資料倉儲」和缺少邊緣計算的問題。

D感測器 → 本地快取層 → RESTful API → 雲端報表系統 → 模型批次更新

字面在說什麼

資料先快取,再用 API 傳到雲端,做報表和批次模型更新。

為什麼不對

RESTful API 不適合 10,000 台設備每秒高頻連接(HTTP 連線建立開銷大),應用 MQTT 或 Kafka;「雲端報表系統」是事後查詢的工具,不是即時監控;「模型批次更新」更是純事後處理,根本無法即時。這個架構的每個元件都在朝「延遲型」方向選,完全不符合毫秒級要求。

誰會選錯

對「快取」和「RESTful API」比較熟悉,覺得「快取 = 快」,但快取的「快」是「讀取快」,不是「即時處理快」。IoT 即時監控的瓶頸不在快取,在計算和傳輸延遲。

變形題

同個考點下次怎麼變形

延伸

想再往下看,這 5 個

答案、題目或解析有問題?回報這題

出處:iPAS 經濟部產業人才能力鑑定 ・ 114 年第二梯次 iPAS AI 應用規劃師 中級 科目二 大數據處理分析與應用 第 19 題

看官方原文 PDF

原題 © 經濟部產業發展署,AITerms.tw 僅作教學解析使用,本站解析以 CC BY-NC-SA 4.0 授權。