色五月色开心色婷婷色丁香,五月婷婷丁香花综合网,婷婷丁香五月激情综合在线,五月婷婷六月丁香动漫,婷婷丁香五月激情综合在线,丁香花中文字幕在线观看,播五月色五月开心五月网,开心激情综合网,狠狠色丁香婷婷综合最新地址,丁香视频在线观看,狠狠做六月爱婷婷综合av,久久激情五月丁香伊人

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實戰(zhàn)洞察。

輕量級工業(yè)物聯(lián)網(wǎng)平臺實戰(zhàn):從設(shè)備接入到告警推送的完整方案

輕量級工業(yè)物聯(lián)網(wǎng)平臺實戰(zhàn):從設(shè)備接入到告警推送的完整方案 簡介工業(yè)物聯(lián)網(wǎng)是智能制造數(shù)字化轉(zhuǎn)型的關(guān)鍵基礎(chǔ)設(shè)施其核心價值在于打通現(xiàn)場設(shè)備層與信息管理層的數(shù)據(jù)鏈路。對于車間級、產(chǎn)線級的中小規(guī)模場景大型平臺往往過于復(fù)雜笨重而輕量級解決方案通過合理的架構(gòu)設(shè)計與技術(shù)選型在部署成本、維護(hù)復(fù)雜度和功能完整性之間取得平衡。基于設(shè)備接入、數(shù)據(jù)存儲、可視化監(jiān)控、告警引擎與權(quán)限安全等核心模塊可以快速構(gòu)建一套真正可落地、可維護(hù)的工業(yè)物聯(lián)網(wǎng)管理后臺。此類系統(tǒng)采用Docker Compose一鍵部署支持Modbus、MQTT等常見協(xié)議接入配合時序數(shù)據(jù)庫與WebSocket實時推送既能滿足日常監(jiān)控需求又能通過閾值告警與去抖機(jī)制保障生產(chǎn)安全。無論是系統(tǒng)集成商還是工廠信息化工程師都可以從這套方案中獲得直接可用的工程實踐參考理解工業(yè)數(shù)據(jù)從采集到應(yīng)用的全鏈路設(shè)計思路并有效規(guī)避實施過程中的常見陷阱。 做過工業(yè)項目的人應(yīng)該都有同感甲方一開始的需求往往特別樸素就是“讓我在辦公室能看一眼車間設(shè)備到底轉(zhuǎn)沒轉(zhuǎn)、數(shù)據(jù)正不正?!薄?傻饶阏嫒フ{(diào)研方案會發(fā)現(xiàn)市面上的工業(yè)物聯(lián)網(wǎng)平臺要么貴得離譜要么又重又復(fù)雜部署周期按周甚至按月算對于一個只有幾十臺設(shè)備的車間來說完全是殺雞用牛刀。我前后在幾個產(chǎn)線改造項目里折騰過不少方案最后沉淀下來的路子就是像 iotStudio 這樣搭一套真正輕量級的工業(yè)物聯(lián)網(wǎng)管理后臺。這篇文章就圍繞 iotStudio 這套后臺聊聊它整體是怎么設(shè)計的設(shè)備接入、數(shù)據(jù)存儲、可視化、告警、權(quán)限這些核心功能怎么落地以及我實際部署時踩過哪些坑、怎么排的錯。適合系統(tǒng)集成商、工廠里的信息化工程師還有準(zhǔn)備自己動手做物聯(lián)網(wǎng)后臺的開發(fā)者參考。內(nèi)容偏實操盡量少講虛的把能直接用的東西都擺出來。1. 整體思路輕量級工業(yè)物聯(lián)網(wǎng)后臺應(yīng)該怎么搭1.1 輕量級不是閹割是取舍很多人一聽“輕量級”第一反應(yīng)是“功能少、界面簡陋”。其實不是。工業(yè)物聯(lián)網(wǎng)后臺的“輕量”核心在于部署成本、維護(hù)成本和啟動成本的控制而不是犧牲核心能力。一個典型的場景對比就清楚了。大型工業(yè)互聯(lián)網(wǎng)平臺動輒幾十個微服務(wù)需要專門的實施團(tuán)隊、專門的機(jī)房環(huán)境、至少半個月的調(diào)試周期而且每年的授權(quán)和維護(hù)費(fèi)用不是中小型項目能承受的。但產(chǎn)線改造、設(shè)備監(jiān)測這類項目往往只需要一個后臺能把設(shè)備數(shù)據(jù)收上來、存下來、顯示出來再配上告警和報表就夠了。iotStudio 的定位就是這個中間地帶它不做工業(yè)大腦、不做數(shù)字孿生那一套重東西而是把“設(shè)備接入、數(shù)據(jù)處理、可視化監(jiān)控、告警通知、用戶管理”這幾件最核心的事做扎實。部署上能一鍵起服務(wù)數(shù)據(jù)量上來之后也能平滑擴(kuò)展不會因為輕量就變成玩具。對比維度大型工業(yè)互聯(lián)網(wǎng)平臺iotStudio 這類輕量方案部署方式微服務(wù)集群、多臺服務(wù)器單機(jī) Docker Compose 即可實施周期數(shù)周起步1-2 天可跑通資源占用多節(jié)點(diǎn)、高配置2 核 4G 可跑維護(hù)成本需要專職運(yùn)維普通工程師可維護(hù)適用規(guī)模集團(tuán)級、跨園區(qū)車間級、產(chǎn)線級、單工廠擴(kuò)展能力強(qiáng)但復(fù)雜度高夠用且可按需加模塊做技術(shù)選型的時候一定要想清楚一個問題你要服務(wù)的是業(yè)務(wù)不是技術(shù)。上一堆炫技的組件最后沒人能維護(hù)那才是最大的坑。1.2 模塊邊界怎么劃才合理iotStudio 的功能結(jié)構(gòu)我習(xí)慣拆成四層來看采集接入層、數(shù)據(jù)處理層、服務(wù)管理層、展示交互層。這個分層不是隨便拍的而是跟實際運(yùn)維節(jié)奏嚴(yán)格對應(yīng)。采集接入層負(fù)責(zé)跟設(shè)備打交道解決的是“怎么把數(shù)據(jù)拿上來”。常見協(xié)議有 Modbus RTU/TCP、OPC UA、MQTT以及西門子、三菱等品牌的 PLC 私有協(xié)議。不同的設(shè)備有不同的協(xié)議這一層的職責(zé)就是把這些差異消化掉向上層統(tǒng)一暴露點(diǎn)位數(shù)據(jù)。數(shù)據(jù)處理層負(fù)責(zé)點(diǎn)位映射、單位換算、閾值判斷、時序存儲解決的是“數(shù)據(jù)拿上來之后放哪、怎么算”。服務(wù)管理層負(fù)責(zé)用戶、角色、權(quán)限、告警通知、操作日志解決的是“誰能看、誰能管、出問題找誰”。展示交互層負(fù)責(zé)組態(tài)大屏、實時監(jiān)控、歷史曲線、報表導(dǎo)出解決的是“數(shù)據(jù)怎么被看到、被理解”。這個分層的最大好處是解耦。設(shè)備換了只動采集層頁面改了只動展示層權(quán)限要加規(guī)則只動管理層。不會出現(xiàn)改一個功能牽一發(fā)動全身的情況。iotStudio 能保持輕量又不容易亂靠的就是這個邊界感。1.3 技術(shù)棧選型怎么選不后悔再聊幾句技術(shù)棧。我見過太多團(tuán)隊一上來就追新框架結(jié)果是招人難、維護(hù)難、踩坑更難。iotStudio 這類后臺項目技術(shù)選型的核心原則是生態(tài)成熟、團(tuán)隊熟悉、資料好找。我實際用下來的組合是這樣的。后端用 Spring Boot 這類主流框架好處是生態(tài)極其豐富幾乎所有工業(yè)協(xié)議都有現(xiàn)成的庫可以參考遇到問題搜一下就是一堆解決方案。前端用 Vue 加一套現(xiàn)成的組件庫配合可視化圖表庫做組態(tài)頁面開發(fā)效率高畫面也不丑。數(shù)據(jù)存儲采用關(guān)系庫加時序庫的搭配關(guān)系庫存設(shè)備信息、用戶、告警記錄這些結(jié)構(gòu)化數(shù)據(jù)時序庫存采集到的點(diǎn)位歷史數(shù)據(jù)。如果點(diǎn)位和存儲量都不大MySQL 單庫也能扛住點(diǎn)位規(guī)模上來之后再接 TDengine 或 InfluxDB 這類時序數(shù)據(jù)庫。部署用 Docker Compose這是輕量化的關(guān)鍵一條命令起全部服務(wù)現(xiàn)場實施的時候特別省心。這套組合不是“唯一正確答案”但它是踩過足夠多坑之后最穩(wěn)妥的一個版本。團(tuán)隊里如果有人對某個環(huán)節(jié)特別熟完全可以替換但整體思路不要變能簡單就不復(fù)雜能通用來就不自研。2. 核心功能拆解從設(shè)備接入到告警推送的完整鏈路2.1 設(shè)備接入第一個真正的坎設(shè)備接入是工業(yè)物聯(lián)網(wǎng)后臺里最容易翻車的地方?jīng)]有之一。iotStudio 的設(shè)備接入流程核心是“網(wǎng)關(guān) — 設(shè)備 — 點(diǎn)位”三級模型。網(wǎng)關(guān)是物理采集入口比如一臺工業(yè)網(wǎng)關(guān)或一臺工控機(jī)負(fù)責(zé)跟現(xiàn)場設(shè)備做協(xié)議通信設(shè)備掛在網(wǎng)關(guān)之下代表一臺具體的 PLC、儀表或傳感器點(diǎn)位則是設(shè)備上的具體數(shù)據(jù)項比如溫度、壓力、轉(zhuǎn)速對應(yīng)協(xié)議里的寄存器地址或數(shù)據(jù)標(biāo)簽。以最常見的 Modbus TCP 為例接入一臺設(shè)備時需要明確這樣一組參數(shù)設(shè)備 IP、端口默認(rèn) 502、從站號Slave ID、功能碼、寄存器起始地址、寄存器數(shù)量、數(shù)據(jù)類型、字節(jié)序、數(shù)據(jù)精度和單位。任何一個參數(shù)不對讀上來的數(shù)據(jù)都是廢的。我自己在項目實施中踩得最多的坑有三個一是寄存器地址偏移很多 PLC 手冊上寫的地址是 40001但程序里要填的是 0因為 40001 對應(yīng)的是協(xié)議地址 0二是數(shù)據(jù)類型不匹配比如明明是 32 位浮點(diǎn)數(shù)按 16 位整數(shù)去讀讀出來的數(shù)值就會非常離譜三是字節(jié)序不對同樣一組兩個寄存器高字節(jié)在前和低字節(jié)在前讀出來的浮點(diǎn)數(shù)能差出幾個數(shù)量級。這三類問題判斷特征非常明顯前者是數(shù)據(jù)讀不出來或地址越界后兩者是讀得出來但數(shù)據(jù)完全對不上。點(diǎn)位數(shù)量多的時候一個個手工添加不現(xiàn)實。iotStudio 支持點(diǎn)位批量導(dǎo)入用 CSV 模板整理好再上傳一次導(dǎo)入幾百個點(diǎn)位都沒問題。實際項目中我通常先讓甲方提供一份設(shè)備點(diǎn)位表包括點(diǎn)位名稱、寄存器地址、數(shù)據(jù)類型、單位這些信息我在這基礎(chǔ)上整理成導(dǎo)入模板能省掉大量重復(fù)勞動。2.2 數(shù)據(jù)存儲算好這筆賬再動手?jǐn)?shù)據(jù)存儲這塊很多剛開始做物聯(lián)網(wǎng)項目的人都會低估容量需求。我先給個簡單估算方法假設(shè)現(xiàn)場有 1000 個點(diǎn)位每 5 秒采集一次每個點(diǎn)位一天會生成 17280 條記錄1000 個點(diǎn)位就是 1728 萬條記錄。一條時序記錄按 100 字節(jié)算一天就是 1.6GB 左右一個月大概是 49GB一年將近 600GB。這個數(shù)字一擺出來存儲策略就很重要了。iotStudio 的常規(guī)做法是原始明細(xì)數(shù)據(jù)只保留較短周期比如 30 天用于最近的故障分析和趨勢查看超過這個周期的通過降采樣聚合到分鐘級或小時級再長期保留。這樣既能查得到歷史趨勢又不會讓存儲成本失控。輪詢采集頻率也要合理設(shè)置。剛接觸物聯(lián)網(wǎng)的人容易圖快把采集間隔壓到 1 秒結(jié)果設(shè)備網(wǎng)關(guān)扛不住、數(shù)據(jù)庫壓力大畫面反而卡頓。經(jīng)驗值是這樣的大多數(shù)設(shè)備監(jiān)測場景3 到 5 秒的輪詢間隔完全夠用真要秒級甚至毫秒級的數(shù)據(jù)那走 MQTT 主動上報比輪詢更合適。iotStudio 把這幾個參數(shù)做成可配置項就是在提醒你這些值要按現(xiàn)場情況來定不是越短越好。2.3 可視化與組態(tài)讓數(shù)據(jù)真正“被看到”數(shù)據(jù)接進(jìn)來、存下來之后最終要落到頁面上讓人看懂。iotStudio 的展示層由三個部分組成實時監(jiān)控頁、組態(tài)大屏、歷史曲線。實時監(jiān)控頁解決的是“當(dāng)前設(shè)備是否正常”用卡片、列表和設(shè)備狀態(tài)圖標(biāo)展示一眼能看出哪臺在線、哪臺離線、哪個參數(shù)超了。組態(tài)大屏解決的是“工藝流程是否順”把設(shè)備圖標(biāo)、管道、閥門按現(xiàn)場布局?jǐn)[到一張畫布上點(diǎn)位數(shù)據(jù)實時刷新到對應(yīng)的控件旁邊。歷史曲線解決的是“趨勢是否在變”支持選擇時間段、多點(diǎn)位對比、導(dǎo)出數(shù)據(jù)。這里有一個很關(guān)鍵的技術(shù)細(xì)節(jié)頁面上的數(shù)據(jù)是怎么刷新的。常見做法有兩種一種是前端短輪詢每隔幾秒調(diào)一次接口拉數(shù)據(jù)另一種是 WebSocket 長連接服務(wù)端主動把數(shù)據(jù)推給前端。iotStudio 的做法是兩種都支持點(diǎn)位少的小項目短輪詢實現(xiàn)簡單、夠用點(diǎn)位多、實時性要求高的場景推薦 WebSocket服務(wù)端采集到數(shù)據(jù)后直接推給前端延遲低、請求開銷小。對比項短輪詢WebSocket實現(xiàn)復(fù)雜度低中等實時性取決于輪詢間隔采集后立即推送服務(wù)端壓力每輪請求都打接口連接建立后無重復(fù)開銷適用場景點(diǎn)位少、更新不頻繁點(diǎn)位多、實時性要求高頁面上點(diǎn)位數(shù)量超過幾百個時還要注意按需渲染不要一個頁面一次性把所有數(shù)據(jù)全鋪上去。把頁面拆成模塊只有滾動到或切到某個區(qū)域時才去加載對應(yīng)的數(shù)據(jù)體驗會好很多。2.4 告警引擎把通知發(fā)到對的人手里數(shù)據(jù)實時監(jiān)控的目的不只是看更重要的是異常時能及時告警。iotStudio 的告警引擎核心是“閾值觸發(fā) 去抖 通知渠道”。閾值規(guī)則可以針對點(diǎn)位配置上限、下限、區(qū)間等條件比如“1號爐溫度大于 180 度觸發(fā)告警”。去抖參數(shù)解決的是誤報問題現(xiàn)場數(shù)據(jù)經(jīng)常有瞬時抖動溫度可能某一次超過了 180 度下一秒又回到正常如果每次抖動都推送一條告警白天晚上手機(jī)能響個不停。所以告警判斷里要有延時去抖比如“持續(xù) 5 秒超過閾值才觸發(fā)”這樣既能濾掉毛刺又不會錯過真問題。通知渠道方面iotStudio 支持郵件、釘釘/企業(yè)微信機(jī)器人 Webhook 以及短信網(wǎng)關(guān)。實際項目里用釘釘或企業(yè)微信機(jī)器人最多原因是配置簡單只需要拿一個 Webhook 地址填進(jìn)去就行而且手機(jī)端接收體驗好。郵件適合做日報匯總短信適合值班人員的緊急通知短信渠道需要接入第三方短信服務(wù)會增加成本建議只在關(guān)鍵點(diǎn)位用。告警風(fēng)暴也是要提前防的。一個點(diǎn)位告警了如果不做處理每分鐘推送一條那基本等于通知渠道癱瘓。合理的做法是同一點(diǎn)位、同一告警級別只推送一次等恢復(fù)后再次超過閾值時才重新推送這就是告警恢復(fù)機(jī)制。iotStudio 里有“告警升級”和“告警確認(rèn)”的概念告警可以被值班人員手動確認(rèn)和關(guān)閉整個過程會記錄到告警臺賬里方便事后追溯。2.5 權(quán)限與安全后臺的最后一道防線工業(yè)物聯(lián)網(wǎng)后臺屬于生產(chǎn)管理系統(tǒng)一旦被非授權(quán)人員操作后果跟辦公系統(tǒng)完全不是一個量級。iotStudio 的角色模型按最小權(quán)限原則設(shè)計我常用的角色劃分是四類管理員、工程師、操作員、訪客。角色權(quán)限范圍典型操作管理員全部功能用戶管理、系統(tǒng)配置、數(shù)據(jù)清理工程師設(shè)備與點(diǎn)位管理、告警規(guī)則配置新增點(diǎn)位、修改閾值、調(diào)整采集參數(shù)操作員實時監(jiān)控、告警確認(rèn)查看數(shù)據(jù)、處理告警訪客只讀大屏僅查看指定頁面部署完成后的第一件事就是修改默認(rèn)管理員密碼。這臺系統(tǒng)的默認(rèn)密碼在文檔里寫得很清楚部署完如果不改等于門戶大開。登錄安全方面iotStudio 支持密碼復(fù)雜度策略、登錄失敗鎖定和操作日志審計。密碼要同時包含字母、數(shù)字和特殊字符長度不低于 8 位連續(xù)輸錯 5 次賬號鎖定 15 分鐘所有登錄、配置變更、刪除操作都記錄操作日志誰在什么時候做了什么全都有據(jù)可查。接口層的安全也不能省。前后端交互要用令牌機(jī)制令牌要有過期時間不能一個 token 永久有效。關(guān)鍵操作比如刪除設(shè)備和修改閾值服務(wù)端要再做一次權(quán)限校驗不能只靠前端頁面隱藏按鈕。關(guān)于賬號安全的整體思路記住一句話不要把權(quán)限給得比需求多不要把密碼設(shè)得比門檻低。3. 實操記錄從零部署一套 iotStudio 后臺3.1 準(zhǔn)備一臺跑得動業(yè)務(wù)的主機(jī)iotStudio 對硬件的要求不高但這不等于隨便找臺機(jī)器就能跑好。我給的配置參考是這樣的場景CPU內(nèi)存存儲說明測試體驗1 核2G20G SSD能跑通功能別指望性能小型項目50 臺以下設(shè)備2 核4G100G SSD推薦起步配置中型項目100-300 臺設(shè)備4 核8G500G SSD數(shù)據(jù)量大的建議上時序庫操作系統(tǒng)用 Ubuntu 20.04 或 CentOS 7 都行我用 Ubuntu 多一些主要是 Docker 環(huán)境裝起來省事。部署之前先把 Docker 和 Docker Compose 裝好這是唯一的前置條件不需要裝 Java 環(huán)境、Node 環(huán)境這些因為都打包進(jìn)鏡像里了。3.2 Docker Compose 一鍵部署iotStudio 的部署核心就是一份 docker-compose.yml 文件。我用過的配置文件大概是這樣的結(jié)構(gòu)version: 3.8 services: mysql: image: mysql:8.0 container_name: iotstudio-mysql restart: always environment: MYSQL_ROOT_PASSWORD: ${DB_PASSWORD} MYSQL_DATABASE: iotstudio volumes: - ./data/mysql:/var/lib/mysql ports: - 3306:3306 iotstudio-server: image: iotstudio/server:latest container_name: iotstudio-server restart: always depends_on: - mysql environment: DB_HOST: mysql DB_PORT: 3306 DB_NAME: iotstudio DB_USER: root DB_PASSWORD: ${DB_PASSWORD} JWT_SECRET: ${JWT_SECRET} COLLECT_INTERVAL: 5000 ports: - 8080:8080 volumes: - ./data/collect:/app/collect - ./logs:/app/logs啟動命令很簡單兩條docker compose up -d docker compose ps等所有容器狀態(tài)變成 Up瀏覽器訪問 http://服務(wù)器IP:8080 就能打開登錄頁。正常情況下從拉取鏡像到登錄成功需要 10 到 15 分鐘前提是服務(wù)器能正常訪問鏡像倉庫。部署時有兩件事要注意。第一JWT_SECRET 和數(shù)據(jù)庫密碼不要用默認(rèn)值要用自己的隨機(jī)字符串密碼建議用環(huán)境變量文件管理不要把明文寫到 compose 文件里提交到代碼倉庫。第二MySQL 容器首次啟動要初始化數(shù)據(jù)庫如果映射的數(shù)據(jù)目錄之前有殘留數(shù)據(jù)會出現(xiàn)密碼不匹配導(dǎo)致服務(wù)起不來的情況這時候把 data/mysql 目錄清掉重新初始化是最快的解決辦法。3.3 接入第一臺設(shè)備的完整路徑部署完成僅僅是開始接入設(shè)備才是真正進(jìn)入業(yè)務(wù)。我以一臺 Modbus TCP 網(wǎng)關(guān)為例把完整路徑走一遍。第一步新增網(wǎng)關(guān)。在后臺“設(shè)備管理”里新增一個網(wǎng)關(guān)填 IP 地址現(xiàn)場網(wǎng)關(guān)的局域網(wǎng) IP、端口默認(rèn) 502、采集間隔比如 5000 毫秒。保存之后網(wǎng)關(guān)狀態(tài)會開始嘗試連接先看它是否從“離線”變成“在線”如果一直離線先用電腦上的 Modbus 調(diào)試工具測試 IP 和端口通不通不要急著懷疑后臺。第二步新增設(shè)備并綁定網(wǎng)關(guān)。設(shè)備掛在網(wǎng)關(guān)下填設(shè)備名稱、從站號比如從站號 1。第三步新增點(diǎn)位。這一步參數(shù)最多我整理成一張常用的樣板表點(diǎn)位編碼點(diǎn)位名稱從站號功能碼起始地址數(shù)據(jù)類型精度單位TEMP_011號爐溫度103100float0.1℃PRESS_011號爐壓力103102float0.01MPaSPEED_012號電機(jī)轉(zhuǎn)速103200uint161rpm提示起始地址建議對照設(shè)備廠商的協(xié)議手冊來填。手冊里寫 40001程序里可能就是 0有些網(wǎng)關(guān)支持地址偏移自動校正但別依賴它自己核對最穩(wěn)妥。點(diǎn)位數(shù)量多的時候用 CSV 批量導(dǎo)入。模板格式大概是這樣的point_code,point_name,device_id,slave_id,function_code,address,data_type,scale,unit TEMP_01,1號爐溫度,DEV_001,1,03,100,float,0.1,℃ PRESS_01,1號爐壓力,DEV_001,1,03,102,float,0.01,MPa第四步驗證數(shù)據(jù)?;氐綄崟r監(jiān)控頁如果點(diǎn)位有實時值顯示而且數(shù)值在合理范圍內(nèi)說明這條鏈路通了。如果數(shù)值明顯不對優(yōu)先檢查數(shù)據(jù)類型和字節(jié)序而不是去懷疑設(shè)備。3.4 配置一條真正會響的告警設(shè)備數(shù)據(jù)正常采集之后我建議立即配一條告警規(guī)則驗證通知鏈路別等到現(xiàn)場出問題了才發(fā)現(xiàn)告警根本發(fā)不出去。操作路徑是告警管理 → 新增規(guī)則 → 選擇點(diǎn)位 → 設(shè)閾值。以“1號爐溫度”為例設(shè)置上限 180℃去抖時間 5 秒通知渠道選擇釘釘機(jī)器人然后保存啟用。釘釘機(jī)器人這塊配置需要在釘釘群里添加一個自定義機(jī)器人拿到 Webhook 地址填到后臺的通知渠道配置里。Webhook 地址本質(zhì)上就是一個 HTTP 接口后臺通過往這個地址 POST 一條 JSON 消息實現(xiàn)通知。測試的時候把閾值臨時調(diào)到比當(dāng)前值低比如當(dāng)前溫度是 50℃閾值設(shè)成 40℃正常情況下幾秒內(nèi)釘釘群就能收到告警消息。測完再改回正常閾值。這一步我最想強(qiáng)調(diào)的經(jīng)驗是任何告警規(guī)則上線前都必須做一次真實觸發(fā)測試。很多項目上線幾個月告警一次都沒響過最后排查發(fā)現(xiàn)是通知渠道配置錯了或者閾值填反了。一次真實測試只花幾分鐘卻能避免未來最嚴(yán)重的生產(chǎn)事故。4. 常見問題排查與避坑技巧實錄4.1 設(shè)備在線但數(shù)據(jù)一直不刷新這是我被問得最多的問題。設(shè)備狀態(tài)顯示在線說明 IP 和端口通了但點(diǎn)位值一直不動或者一直沒數(shù)據(jù)。排查思路按順序來第一檢查點(diǎn)位配置的從站號和功能碼是否正確。設(shè)備在線不代表該從站、該功能碼支持很多 PLC 的多個從站號是虛擬的地址填錯可能讀不了數(shù)據(jù)。第二檢查寄存器地址是否超范圍。有些設(shè)備地址范圍有限超出范圍會返回異常碼服務(wù)日志里一般能看到。第三用 Modbus 調(diào)試工具先手動讀取一下如果工具也讀不到那就是設(shè)備側(cè)或網(wǎng)絡(luò)側(cè)的問題與后臺無關(guān)。第四看采集日志。后臺會記錄每次輪詢的結(jié)果如果有報錯信息按報錯去查比瞎猜快得多。排查這類問題最忌諱的是在后臺頁面里瞎試參數(shù)。先用調(diào)試工具確定設(shè)備側(cè)能讀到數(shù)據(jù)再回頭檢查后臺配置這樣問題邊界一下就清晰了。4.2 數(shù)據(jù)跳變、斷檔和性能瓶頸數(shù)據(jù)跳變的典型特征是數(shù)值偶爾出現(xiàn)一個明顯異常的尖峰比如溫度在 60℃ 和 250℃ 之間來回蹦。這大概率不是工業(yè)現(xiàn)場本身的問題而是采集采到了錯誤的數(shù)據(jù)。最常見的原因還是數(shù)據(jù)類型不匹配。比如一個真正的 32 位浮點(diǎn)數(shù)按兩個 16 位整數(shù)拼讀就會出現(xiàn)某些時刻數(shù)值完全對不上。這時候?qū)φ諈f(xié)議手冊核對數(shù)據(jù)類型和字節(jié)序基本都能解決。數(shù)據(jù)斷檔則是另一個問題表現(xiàn)為歷史曲線上某些時間段是一條空白。原因通常是采集線程阻塞或者數(shù)據(jù)庫寫入壓力大。采集線程被阻塞常見于某個設(shè)備的響應(yīng)超時時間設(shè)置過長導(dǎo)致整個采集循環(huán)被拖慢了。數(shù)據(jù)庫寫入壓力大常見于點(diǎn)位多、采集頻率高但數(shù)據(jù)庫沒做優(yōu)化。解決思路是給每個網(wǎng)關(guān)單獨(dú)分配采集線程避免一個網(wǎng)關(guān)卡住拖垮全部設(shè)備數(shù)據(jù)庫連接池參數(shù)、批量插入策略也要根據(jù)點(diǎn)位量調(diào)整。如果項目規(guī)模到了上千點(diǎn)位的級別單機(jī) MySQL 往往開始吃力這時候把時序數(shù)據(jù)切換到 TDengine 或 InfluxDB是比硬扛更明智的選擇。iotStudio 的設(shè)計里就考慮到了這一點(diǎn)數(shù)據(jù)訪問層做了抽象切換存儲引擎不需要改業(yè)務(wù)代碼。4.3 告警誤報、漏報與消息風(fēng)暴告警誤報的根源基本都是去抖參數(shù)沒配好。沒有去抖或者去抖太短現(xiàn)場信號一抖動就會觸發(fā)告警。工業(yè)數(shù)據(jù)普遍存在瞬時尖峰合理做法是把去抖時間設(shè)成 3 到 5 秒濾掉毛刺。告警漏報則相反通常是因為閾值設(shè)得離正常值太近導(dǎo)致數(shù)據(jù)稍微波動就進(jìn)入告警狀態(tài)而人已經(jīng)對滿屏告警麻木了真正嚴(yán)重的告警反而沒人注意。閾值設(shè)置的建議是先至少觀察一周的正常數(shù)據(jù)范圍然后在這個范圍基礎(chǔ)上留出 10% 到 20% 的余量。不要憑感覺設(shè)閾值要看真實數(shù)據(jù)。消息風(fēng)暴的應(yīng)對辦法前面提過同一點(diǎn)位同狀態(tài)只推送一次恢復(fù)之后再觸發(fā)才重新推送。同時要把告警分級溫度高了 1℃ 和溫度高了 20℃ 是兩碼事分級之后可以讓不同級別的告警走向不同渠道普通告警發(fā)郵件嚴(yán)重告警發(fā)企業(yè)微信和短信這樣值班人員的注意力不會被低級別告警耗光。4.4 賬號登錄和權(quán)限配置常見問題后臺上線初期賬號類問題主要集中在這幾類。一是管理員密碼忘了。常規(guī)處理流程是通過數(shù)據(jù)庫直接重置密碼。執(zhí)行一條更新語句把管理員密碼重置為初始值然后用初始密碼登錄、立即修改。操作之前務(wù)必先備份數(shù)據(jù)庫這比什么都重要。二是用戶登錄被鎖定。連續(xù)輸錯密碼會導(dǎo)致賬號鎖定這是安全策略在起作用不是故障。等鎖定期結(jié)束或者由管理員解除鎖定即可。如果現(xiàn)場總有人被鎖要么是有人記錯密碼要么是密碼復(fù)雜度要求太高影響使用這時候可以適當(dāng)調(diào)整策略但底線不能破最小長度不小于 8 位必須包含多種字符類型。三是權(quán)限分配不合理。出現(xiàn)過操作員能修改采集參數(shù)導(dǎo)致產(chǎn)線數(shù)據(jù)中斷的事故原因就是所有用戶都給了管理員權(quán)限。權(quán)限配置要堅持最小化原則剛開始寧可給少一點(diǎn)不夠再加別圖省事統(tǒng)一給管理員。注意任何涉及生產(chǎn)系統(tǒng)的操作建議都遵循“先審批后操作”的原則。后臺的操作日志審計功能就是為這個場景準(zhǔn)備的出事之后能說清楚是誰在什么時間做了什么。4.5 問題排查速查表最后把最常遇到的幾類問題整理成一張表方便直接對照處理現(xiàn)象可能原因排查與解決設(shè)備一直離線IP/端口不通、網(wǎng)關(guān)故障先測網(wǎng)絡(luò)連通性再用調(diào)試工具確認(rèn)設(shè)備在線設(shè)備在線但無數(shù)據(jù)從站號/功能碼/地址配置錯誤對照協(xié)議手冊核對參數(shù)查看采集日志數(shù)據(jù)值明顯異常數(shù)據(jù)類型不對、字節(jié)序反了核對點(diǎn)位數(shù)據(jù)類型切換字節(jié)序測試歷史數(shù)據(jù)斷檔采集線程阻塞、數(shù)據(jù)庫壓力大分離采集線程優(yōu)化數(shù)據(jù)庫寫入告警頻繁誤報去抖時間太短調(diào)大去抖時間觀察趨勢后再定告警發(fā)不出去Webhook 地址錯誤、網(wǎng)絡(luò)不通在后臺手動發(fā)送測試消息驗證登錄被鎖定密碼連續(xù)輸錯等鎖定期結(jié)束或管理員解除頁面打開緩慢點(diǎn)位太多、輪詢太頻繁改 WebSocket 推送模塊按需加載這套系統(tǒng)前后我維護(hù)了不短的時間最大的體會是輕量級的本質(zhì)不是少干活而是把復(fù)雜度的邊界控制在你管得住的范圍內(nèi)。iotStudio 的架構(gòu)和功能設(shè)計始終在回答一個樸素的問題——現(xiàn)場工程師到底需要什么、能用什么、能維護(hù)什么。一個后臺再強(qiáng)大如果現(xiàn)場沒人會配、沒人敢動最終也會變成擺設(shè)。另外一個經(jīng)驗是不管系統(tǒng)多輕量上線前一定要把最小閉環(huán)跑通一臺設(shè)備、兩個點(diǎn)位、一條告警、一個可視化頁面全鏈路通了再往里面加設(shè)備、加點(diǎn)位。先把地基打牢后面蓋樓才穩(wěn)。希望這篇東西能讓你少走點(diǎn)彎路做出真正好用的工業(yè)物聯(lián)網(wǎng)管理后臺。本文還有配套的精品資源點(diǎn)擊獲取
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
91人精品妻入口| 亚洲男人的天堂亚洲| 夜夜一区二区| 亚洲欧美一区二区三区一猛片| 日韩无码服务区| 女色视频社区| 99久久精品无码一区二区| 殴美色网| 漂亮人妻被强中文字幕hd| 67914亚洲精品| 国产精品成人久久一区二区三区 | 在线黄页看毛片| 97爱爱| 欧美在线中M| 无码国产精品午夜不卡(| av三级电影在线播放| 久草在| 九九精品美女高溯喷水| 人人操人人狠狠操| 91 亚洲 欧美 日韩 国产 综合| 国产97在线 | 亚洲| 欧美性天天影院| 九九九网页| 免费精品福利在线观看| 国产树林里野战在线看| 久草网站免费在线观看| 在线观看无码三级少妇| 欧美色图亚洲激情| 国产伊人精品在线| 欧美丝袜91| 91麻豆一二三区| 九月丁香婷婷| 91一区二区| 女人喷水视频在线观看| 久久男女激情视频网站| 人妻性爱一区二区| 蜜臀99精品国产高清在线观看| 欧美国产有色电影| 97 视频在线| 丁香五月天社区| 久久久久久久少妇| 777奇米影视777四色| 国产精品国产自产高清AV| 亚洲人久久久久日| 易易A毛视频| 色与欲影视| 天天综合网在线91| 天天干电影| 国产熟女无套内射| 麻豆一区二区三区在线看| 欧美色日| 无卡一区=区| 成人片视频| 青青青艹在线视频| 青青草久久| 91久久久久久久| 伊人青青草久久| 920日本午夜免费| 久久无码成人| 无码免费精品高清| 人人操AV| 熟啊v色欧美热| 99热只有| 神马久久69| 欧美久久久| 大香蕉手机在线| 久操免费视频| 亚洲乱妇p22| 亚洲图片欧美色| 亚洲熟女乱综合一区二区在线-...亚洲国产日韩欧美一区二区三区,久久久久久精 | 亚洲欧美日韩不卡人妻| 天美传媒AV在线| 91亚州| 免费A片三p视频| 黑人性欧美| 亚洲丝袜诱惑| 玖玖资源综合在线视频| 屌逼麻豆| 少妇人妻精品| 色五月天AV| 伊人久久亚洲色欲综合网站 | 亚洲成A∨人影院在线欢看| 99久久婷婷| 大香蕉中文aV在线| 青久久| 亚洲欧美洲综合| 欧美色视| 一区二区三区精品视频| 亚洲日韩av一区二区三区百合| 久久久久久性爱视频| 伦理弟一页| 热G综合热G中文| 天天日天天操天天射河南省| 亚洲 国产 精品一区| 色婷婷丁香五月天| 精品人妻一区二区三区夜夜| 私人尤物在线精品不卡| 女人喷水视频在线观看| 青青草视频久久久久| 日本天天干天天搞一区| 青娱乐福利99| 97二区四区| 国产精品农村妇女精品| 亚洲成?V人片在线观看福利| 蜜臀99999| 亚洲男人天堂网站| 免费a在线播放v| 亚洲免费97免费| 易易A毛视频| 天天天天天天天天天天干美女| 一区二区三区 丝袜 高跟 美腿| 黑人粗大V S日韩女优视频| A级片日韩欧美国产欧美视频精选观看| 在线观看岛国有码| 欧美综合综合| · —级AA伦aa坐爱午夜极速ⅴA一区天天噪天天噪天天噪 | 97在线资源| 亚洲无码国产精品久久| 熟女自慰久久久| 91综合在线| 日韩AV片| 九九碰九九爱97超| 午夜久久一区二区无码中出| 蜜臀久久99精品久久久| 看黑人AV不卡| 牛牛AV人人夜夜澡人人爽| 九九久久99| 久久精品国产99久久,亚洲日韩久久日本一区一区三区 | 欧美亚洲首页| 日韩AV一区二区三区四四| 欧美日韩国产精品久久色婷婷| 天天弄天天操| 偷拍五区| 色婷婷综合久久久久中文国产精品一区中文字幕,国产福利电影一区二区三区 | 一级性爱视频免费观看| 久久精品成人一区二区三区蜜臀| 国产精品香蕉热久久新品| 加勒比人妻综合| 最新中文字幕在线亚洲| av天堂加勒比| 东京热激情视频一二三区| 人妻欧美| 今日头条成人一区二区三区四虎精品| 国产av强奸美女| 久操网在线| 超碰在线香蕉| 天天日天天干天天摸天天操| 99精品在线观看| 97亚洲在线| 欧美性,亚州色| 久久中文字幕不卡人妻| 九九九九九九九九九九精品视频| 丁香六月激情综合| 成年人黄色小视频网站| 欧美草草高清日韩视频| 大香蕉在线视频15| 日韩人妻一二三区视频| 狠狠爱综合网| 天天干人妻视频| 91久精品| 亚洲精品 大香蕉| 国产精品白丝在线播放| 97超碰免费生活| 九九热免费视频| 高清无码一区二区三区| 777超碰| 97硬碰| 精品久久久久久中文| AV中文字幕三四五| 99久久9| 亚洲丝袜二区| 伊人五月天激情| 国产日韩久久| 十八禁电影伊人网| 亚洲五区熟女| 校园春色 男人天堂| 五月天婷婷在线看 | 五月开心网| 国产东北女人在线视频| 一区二区中文| 91中文字幕在线观看| 狠狠操一区二区| 亚洲丁香花色| 亚洲色 国产 欧美 日韩| 超碰97亚洲| 天堂精品| 亚州色图欧美| 爱干爱射网啊啊啊| 黄网站黄视频网站进入口| 九九久久99| 免费操逼视频下载| 97人人草| 伊人久久婷婷| 色综合天天| 黄片aaaaa一区| 欧美十八禁视频| 精品视频在线观看精品| 人妻三级在线中文字幕| 九九热九九| 中文字幕视频在线观看| 另类欧美综合| 人妻第一页| 偷拍导航视频网站| 一卡二卡三卡| 五月婷婷色| 午夜无码精品免费看性色| 大学生口爆吞精| 国产隔壁老王影院在线| www国产天美久久久| 亚洲性爱乱操x| 男女做爰猛烈动高潮A片免费应用| 久久东京热久久| 久久无码精品| 91天天综合| 欧美96精品在线| 免费国产视频| 日本人妻丰满熟妇久久久久久| 精品78| 亚洲av成人精品一区| 97超碰色色| 国产99热| 狠狠久久手机视频精品| 青草草免费网站av| 爱av免费| 国产11页| 久久人妇| 五十路熟女在线不卡观看一区二区| 欧洲射精91| 综合色91| 欧美性生活综合| 玖玖综合网| 欧美日韩夜夜| 秋霞免费AV| 色97综合中文字幕| 99r九九| 国产大陆天天艹| 少妇丝袜在线观看AV| 久久男女激情视频网站| 亚洲情色综合| 伊人国产视频| 嗯啊不要啊在线 | 久久精品| 国产捆绑一区| 成人免费福利在线观看| 91麻豆va国产精品| 日韩美一区| 夜夜操天天肏| 色色综合97| 吉川爱美亚洲二区在线| 国产h小视频在线观看免费| 青青青国产手线观看视频2| 18禁在线视频| 色色色网站| 久久久久成人蜜桃精品| 精品久久久久久久久久久久| 亚州五月| 国产粉嫩蜜臀av一区二区三区| 成人无码在线视频网站| 亚洲宅男天堂| 日韩亚洲精品一区二区| 久无码| 极品后入免费视频| 97欧美综合网| 一区二区免费电影久久| 人妻加勒比东京热| 日韩人妻丝袜美腿中文| 91视频精品| 欧美精品久久久久久久久88| 超碰97起碰| 色大香蕉97N| 欧美色干| av天堂加勒比| 欧美日韩免费专区在线| 亚洲一本色码中文字幕| 欧美一区二区男人天堂| 26uuu国产| 插入粉嫩少妇视频| 青娱乐国产精品| 久久婷婷国产一区二区色| 欧美 亚洲精品首页| 2017亚洲天堂| 中文字幕黄色片| 在线视频一区二区传媒| 亚洲黄片免费在线播放| 男人的天堂2010| 天天综合91入口| 韩三级a视频在线观看| 天天干天天做| 日韩在线观看AV| 思思视频免费看网站| 蜜桃视频精品一区二区| 一级毛片电影免费看| 在线视频免费播放一区| 四虎884| 岛国黄| 久久熟女久| 中文字幕一区二区视频在线观看| 日本少妇va7777| 不卡视频一区蜜桃视频| 91精品国产麻豆国产自产在| 香蕉免费一区二区三区不读 | 国产精品亚洲一级av第二区| 国产又黄又粗又猛大片| 啊灬啊灬啊灬好深灬快高潮了动漫-国产字幕国产在线观看-B049AV | 日韩一级二级三级免费看完整版| 色5月婷婷| 天天大干大香蕉| 操逼www.| 亚洲欧美日韩电影网站一区| 天天干电影| 蜜臀久久99精品久久久久久久久| 2020中文字幕在线观看| 6080yy午夜理论三级一区二区三区无码| 欧洲大香蕉| 亚欧免费| 欧美精品 - 91爱爱| 亚洲精品人妻在线| 天天在线91| 欧美黄片欧美黄片xxx| 国产精品天干天干综合网麻豆| 特级特黄一级毛片免费| 青操影院| 国产亚洲禁久一区二区| 天天性射网| 色婷婷丁香五月| 超碰色老头| 久久本道| 1769一区二区| 99re欧美| 精品人妻夜夜草| 无码动漫av中文字幕| 97超碰天天爱天天爱| 亚洲 欧美日韩 另类| 啊啊啊啊啊舒服| 色婷婷丁香| 国产精品老熟女一区二区| 九九热AV| 久草精品视频| 久久人妻四季| 中文字幕乱在线伦视频中文字幕乱码在线 | 日韩天堂av电影在线观看| 国产超碰AV在线精品| 欧美亚洲美少妇一区二区| 户外裸露刺激视频第一区| 黄站在线免费观看| 丰满搜索结果 -第18页- 久久高清无码| 又粗又长又爽在线观看| 亚洲图片小说欧洲| 和协影院中文字幕三区| 亚洲男人天堂Av| 久久精品国产亚洲AV嘿嘿| 欧美亚洲韩国视频十五区| 熟妇在线视频一区二区| 三级特黄60分钟播放| 欧美色图99| 麻豆视频test| 五月丁香影院| 岛国网址国产| 亚洲AV成人精品网站在AV| 99久在线精品99re8热视频在线| 亚洲AV无码久久久国产精品| www亚洲免费| 国内一级精品| 国产视频小说| 神马午夜久久久| 无码国产精品午夜不卡(| 91性网| 9九九国产| 欧美18禁91| 五月香婷婷| 91久久国外网| 97超久碰| 嫩草 人人网精品| 国产女人高潮视频| 操逼操网| 亚洲蜜乳av| av影片在线观看不卡| 国产精品久久泡妞网站| 欧美最婬乱婬爆婬牲视频| 天天摸夜夜摸| 午夜男人天堂| 亚洲天堂人妻一区二区| 老女人日韩美91| 天天日天天插| 超碰99在线观看| 啪一啪免费视频| 乱操乱伦AV| 欧美激情激情xxxx欧美专区| 欧美日韩1234| 亚洲有码视频二区| 91爱| 91综合网| 1000部熟女视频在线观看| 欧美色图综合| 天天看天天日天天操| 久久色精品视频在线| 久久精品成人| 精品九九九九九| www.91视频网| 91内射| 97干97色| 美国日韩黄片| 极品尤物女神在线观看| 久久精品国产亚洲AV嘿嘿| 国产a片操逼| 日韩av不卡在线看| 97天天插| 日韩特级毛片免费观看全集| 人妻性爱一区二区| 91搞逼视频| 99国产在线 精品 视频| 强奸乱伦av电影| 亚洲激情综合| 熟妇亚洲一区二区三区| 久偷拍欧美日韩三区| 青青草玖玖爱| 亚洲情色 自拍| 美女91网站| 国产 亚洲 一二三四| 韩国手机不卡无码三级视频| 国产操逼逼网| 91 刺激在线| 裸体女人草逼视频播放一区,二区,三区,四区,五区 | 久久社区一区二区三区| 国产超碰| 老熟妇一区二区三区啪啪| 日韩成人人妻网站| 青草综合| 国产亚州精品美女久久久免费| 手机在线播放国产福利| 国产欧美日韩在线观看麻豆传媒公司 | 九九热精品免费视频| 麻豆AV96熟妇人妻| 欧美女同在线| 成人性爱AV在线免费观看| 十八禁视频网站| 国产亚洲 中文欧美久久| 在线 亚洲 网爆 自拍| 亚洲情色在线| 中出在线视频| 美国一区二区三区视频| 天天影视网综合少妇| 丰满精品人妻少妇久久字幕| 国产精品97超碰| 国产色图乱伦| 99热99色| 91视频综合在线| 91天堂| 人人操人人uiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiii | 手机在线看片免费人成视频| 欧美大香蕉97| 抽插亚洲无码| 人、人、摸,人、人、草| 偷窥自拍亚洲色图| 麻豆色99999| 久操视频在线观看| 久久曰曰| 国产蜜臀在线| 黑人狂躁日本妞一区二区三区| 六六久久日韩不卡| 亚洲激情视频| 日韩操人| 男人的天堂无码| 欧美爱三级日韩久久| 人妻熟女一区在| 啊啊啊好大好深| 啪一啪免费视频| 蜜伊人色综合97| 日日摸天天爽夜夜欢| 黄片国产精品一区二区| 欧美老妇女内射网址| 超碰97综合在线| 囯产操逼片| 天天舔天天日天天射| 91午夜无码| 91成人在线| 韩国一级做a久久久久| 97福利视频| 欧美图片校园春色| 亚洲黑丝在线| 国产老女人久久毛| 97超级久久强资源| 人妻丝袜美腿中文字幕| 亚洲综合码| 操b在线观看| 九九热视频这里只有精品| 情色图区| 色哟哟511老熟女| 无码人妻系列少妇| 色色色综合| 伊人麻豆传媒| 国内精品久久国产,www香蕉久久五月丁香,亚洲欧美日韩精品永久在线,日本精品一 | 久久亚洲欧美一区二区三区-亚洲国产精品第一区二区 | 日韩性爱1级片视频| 亚洲色图欧美色图制服丝袜 | 精品国产一级久久| 久久亚洲一区女同性恋中文字幕| 在线另类| 韩国一级做a久久久久| 青娱乐大香蕉| 亚洲超碰AV| 国产夫妻性生活视频| 高清在线偷拍自拍视频| 日本韩高清无砖码22o| 欧美少妇一区二区三区| 超碰97久久| 天天日天天操VV| 日韩在线观看字幕精品| 国产人妻久久精品一区二区三区| 亚洲色天堂日韩中| 91丨九色丨国产丨人妻在线 | 香港久久久| 国模限制级电影| 91精品国产日韩欧美综合| 欲色啪| 久久久久久欧美精品se一二三四| 一区二区不卡视| 久久妇| 人妻熟女一区在| 熟妇xxxxx性春色| 欧美日日人人天天| 国产熟女| 992这里有精品| 中文字幕五月婷婷免费| 中文字幕人妻丝袜乱一区三区| 国内精品不卡无毒99999| 超碰国产精品久| 日韩丨制服丨中文|在线| 熟女人妻av在线资源,黄色的资源| 欧美精品精品一区二区| 超碰97久| 亚洲交换| 97色视频在线| 大香交伊人网| 欧美日韩性爱无码| 美女视频尤物网在线看| 女生久久网| 色婷婷久久综合超碰| 农村妇女一级二级三级视频| 国产色呦呦| 26uuu久久| 91热热色| 91狠狠狠| 国产精品电| 日逼五月天| 五月丁香久久| 亚洲精品国产精品乱码不99| 国产精品无套内谢| 可免费观看的av毛片中日美韩| 人伦四五区| 国产亚洲日本| 久9久精品视频| 嗯嗯啊啊用力视频免费| 丁香九月婷婷| 中文字幕日韩电影人妻| 午夜亚洲WWW湿好大| 亚洲天天更新| a啊啊啊啊啊啊啊啊一区二区| 爱干爱射网啊啊啊| 玖玖爱一区在线| 999狠狠综合| 国产激情久久久| 日韩激情啪啪| 91精品黄在线观看| 亚洲欧美在线观看2021| jizzjizz欧美| 免费超碰97在线观看| 亚洲日韩美国人妻| 色97| 久久久久久AV无码免费网站| 亚洲国产成人精品无码专区| 在线视频免费播放一区| 国产精品无码在线| 国产人伦a片信息免费片| 久久黄色视频一区二区三区 | 懂色Av一区二区三区| 综合夜夜| AVE乱伦| 亚欧无码线免费观看视频| 91熟女视频| 99久久精品无码一区二区毛片免费 | 亚洲成人妻日韩在线| 骚人妻少妇视频| 99国内熟女露脸视频| 91麻豆一二三区| 国产精品农村妇女精品| 国模久久在线| 思思热国产高清| 97人妻色| 大香蕉乱级| 国产九九久久久精品| 国产高清自拍| 天天综合精品| 欧美大香蕉久| 草伊人高潮喷水超碰| 日韩成人性日韩成人性爱视频在线免费观看| 久久久一区二区三区四曲免费听| 外国免费性情大片| 丁香激情网| 人人妻人人玩人人澡人人爽| 欧亚乱色熟一区二区三四区| 无码不卡亚洲成?人片| 999 久久久| 欧美日韩系列| 无码一区免费在线不卡| 熟女精品va中文字幕| 9色在线| 裸模AV女优| 9 1果冻精品视频| 2017av无码免费无线播| 无码av永久免费专区网站| 看免费的黄片| 精品一区二区三区蜜桃臀赵总 | 国产自啪精品视频网站黑丝| 黄色成年| 乱欲一区二区| 欧美日韩国产传媒在线精品| 9999九九九久久久| 97久久精品| 六十路日本| 欧美激情片一区二区| 超碰97人人乐| 中文字幕123| 久久99国产综合精品女同| 91精品成人| 花花AV导航| 精品亚洲国产成人av网站| 五月天色图影视| 偷拍亚洲视频一区二区三区四区| 综合久久久久久久久91| 四虎影院成年人片| 蜜臀一二三| 精品国产乱码| 小草三级久久观看| 日本黄色精品| av凤凰久久久| 2026国产精品视频| 亚洲日韩精品久久久久一区壹牛| av天天在线观看| 久久精品高清无码一区| 翔田千里无码中出中文字幕| 日韩草久视频| 香蕉视频欧美一卡二卡| 丁香激情五月天| 国产风韵犹存熟妇三区| 女人 A一级| 亚洲天堂第一页| 91精品国产91久久青草| 男人的天堂不卡一区二区| 国内毛片四区| 国产女人成人精品视频| 色哟哟AV| www.色操逼| 精品二区三四区五电影 | 免费看美国人人爽,人人操| 青青伊人加勒比海| 天堂中文日本在线观看| 欧美日韩人妻婷婷一区| 偷拍三区| 操淫穴亚洲五月丁香| 26uuu性物| 天美精品一区二区三区四区在线观看 | 特级特黄一级毛片免费| 欧美 日韩 国产传媒| 久久久人妻| 亚洲熟女乱色一区二区三区| 亚洲男人天堂2019| 久久超碰网| AV老汉| 热无码中文亚洲H一道本一区二区| 九九九午夜| 一本久道在线综合视频| 亚洲性少妇| 国产亚洲精品农村妇女| 亚洲欧美校园| 久久久精品国产亚洲伊人| 2017天天操| 久久久久9999妇女| 久草国产在线视频| 综合色久欲| 中文字幕av亚洲在线| 福利天天都操| 一本道综合色图| 欧美91在线| 亚洲日产专区婷婷| 丁香婷婷啪啪| 97综合网| 搡老熟女国产1000部| 大香蕉手机视频| 超碰免费97| 欧美在线中M| 九九亚洲视频| 国产黄色剧情影片麻豆免费播放| 日韩精品人妻中文字有码在线| 中国国国产一级特黄毛片| 大香蕉视频啪啪啪啪| 五月天丁香网| 人妻丰满熟妇一区二区三| 是还免费视频1727我| 我爱大香蕉| 日本免费人成视频播放120秒| 国产精品粉嫩福利在线| 老鸭窝亚洲毛片| 日本在线不卡v二区| 四虎影视欧美| 久久亚洲色图中文字幕| 懂色综合久久久| 亚洲色图欧美色图日韩色图| 99热销国产这里有精品| 亚洲青青草| 久久婷婷色综合一区二区三区| 秋霞一级A片黄色视频| 亚洲丝袜99| 欧美性区| 丁香六月综合激情| 性色生活片久久毛片婬片免费放女人一级毛片| 麻豆成人AV| 色哟哟1区2区| 中文字幕视频在线观看一区二区| 天天肏夜夜肏| 欧美aⅴ99久久黑人专区| 色香色欲天天综合网天天来吧| 久久透逼视频| 97天天日| 另类图片五月天| 夜夜夜夜爽| 啪啪视频mP4| 色婷婷影院| 综合网久久| 国产精品自在线发布| 蜜臀一区二区三区亚洲最新章节在线观看 - 高清蜜臀一区二区三区亚洲全集播放 | 日本熟女中文| 在线看的av| 午夜亚洲| 舔舔啊| 久久精品视频在线观看| 91色碰| 91大学精品激情戏| 久久久97| 久久亚州精品成人Av无| 中文字幕一二三| 日本大香蕉综合网红本杳社区| 亚洲资源网| 国产情色第一第二页在线观看| 青青草视频久久久久| 性欧美另类高清| 九月丁香婷婷| 亚洲欧美一区二区三区在钱蜜桃| 97婷婷色| 婷婷色一区| 亚洲中文字幕噜噜噜久久久| 九九aV| 亚洲nv男人的天堂网| 乱老女人一区二区视频| 亚洲AV无码乱码在线观看性色| 女人被添高潮免费视频| 国产呦精品一区二区三区下载| 岛国视频一二三区| 在免费jIzzjIzz在线视频| www.av在线视频| 亚欧成人综合影院| 无码抄逼网| 欧美婷婷五月天| 欧美丰满熟妇XXXX性ppX人交| 国产亚洲综合欧美一区| 色五月丁香五月| 丁香五月天堂网| 日本天天人人狠狠在线日美女 | 秋霞男人网| 福利风月五月天影院| 尤物av网站| 亚洲 综合 第一页| 死我十八禁| 亚洲第一视频 欧美风情 日韩| 欧美亚洲首页| 婷婷色综合欧美日韩| 69XX一中文字幕人妻91| 久久毛卡| 五月天婷婷久久| 乱色视频中文字幕| 91偷拍欧美亚洲| 18禁久极品美女久久哦哟呀!| 手机久操欧美综合色码| 91热色| 国产久久久久久| 中文字幕乱在线伦视频中文字幕乱码在线| 国产三级多多影院2022国产AA一级毛片无码| 国产精品欧美日韩久久| 欧美午夜精品久久久久久超碰| 色噜噜国产在线| 天天日天天屌天天操| 男人综合网| 自拍内地三级在线观看| 激情九月婷婷| 亚洲综合在线高清| 福利五区| 一区在线精品中文字幕| 午夜福利av电影在线| 欧美色图天堂在线| 中文字幕97色| 日天天九九天堂666| 亚洲成人性爱网站在线播放| 九九色图| 久操九九九九九九九九九九九九九九九九九九九九九九九九九九九九 | 五月婷久久| 亚洲中文字幕乱码无码一区二区| 丝袜狂射91| 日本孕妇一区二区视频操逼免费看 | 人人 操人人 操人人| 日本天天操| 人妻出轨一区二区三区| 热久久无毒不卡| 色欲Av人妻精品一区二| 中文字幕在线观看丝袜| 大乔未久88一区| 久久夜夜| 97超碰碰碰| 久久久久幕乱码| 久久黄片国产一区二区| 欧美熟女少妇| 黄色成年| 久久婷婷精品| 91超碰在线播放| 一区二区中文| 97超碰jingpin| 国产三级中文字幕粉嫩| 性爱视频无打码在线观看| 天天综合网91入口| 啊啊啊免费视频| 清柠毛片| 国产在线激情| av片在线观看免费播放| 久久视频,这里只有精品| 久久鲁夜| 97视频播放| 99热只有| 久久有码视频| 婷婷五月天AV| 亚洲色图欧美色图在线播放| 97人妻免费中文字幕| 精品九九淫乱男| 亚洲AV成人无码一二三久久| 97 国产一区| 少妇一级无码精品| 麻豆天美国美国产AV| 亚洲激情综合另类| 91校园春色长篇| 亚洲中文sv| 夜夜爽77777| 精品人妻一区二区三区在线视频不卡| 婷婷五月花| 易易A毛视频| 狠狠综合| 欧美成熟性爱精品| 欧美狠狠操| 99在线无码精品秘 入口黑人| 在线观看视频91| 大学生口爆吞精| 天天热精品| 三级片网站在线播放| 欧美伦乱爱| 人妻精品一区二区在线| 亚州欧美一区| 久久久久国产一区二| 欧美淫乱视频| 日本人妻A片成人免费看片| 久久↗↗| 久久人妻视频网| 男女一进一出视频久久| 大香蕉欧美国产日韩高潮| 能在线播放的国产三级| 国产自产22区| 日本有码久久| 黄片视频观看| 男人天堂久久精品不卡| 色爱综合网| 日本不卡二区| 日韩大香蕉精品在线视频| 亚洲国产av中文字幕久久| 精品一区二区三区四区外站 | 亚洲成a人片在线观看中文!!!| 国产精品久久久久999| 色婷婷综合网站| 国产午夜福利专区综合| 色臀aV| 性吧在线视频| 久久久久久国产无码精品| 亚洲狠狠入| 99综合自拍| 日韩国产中文字幕| 俞拍久久国应视频| 情色五月天久久久| 亚洲强奸乱伦影视网| 色吧5亚洲| 中文精品少妇天堂| 97精品第3页| 99综合视频| 性色av大全| 日韩色香| 日韩精品9区| 宅男午夜在线视频| 欧美国产伊人久久久久| 天天干天天舔| 色色色热| 久久久国产av美女私房| 亚洲欧美清纯| 2026国产精品视频| 欧美色偷拍| 一级啊性爱在线视频| 美国日韩黄片| 亚洲天堂资源在线| 国产精品久久久久久久免牛肉蒲团| 亚洲一区二区三区久久 亚洲一区二区| 大香焦A片| 老熟女综合| 久操免费视频| 婷婷香网站| 欧美激情 日韩精品| 91精品丝袜久久久久久| 999亚洲国产视频| 日本高清免费一本视频在线观看| 亚洲久久天堂| 激情婷婷丁香网| 97碰碰日本乱偷人妻中文的| 97人亚洲综合字幕| 人妻少妇一区二区| 国产精品久久久三级无码| 51一区二区三区| 国模无码人体一区二区三| 一区二区高清视频| sewuyueav| 熟妇色99| 男生通女生屁股| 国产传媒一区日韩| 高潮嗯啊性感美女久久久| 97干日韩| 人妻精品综合中文字幕在线| 九九热视频在线观看| 三级三级三级日本99| 日韩黄色成人性爱| 亚洲图片婷婷五月天| 丁香六月激情| 中文字幕国产| 操逼不卡中文字幕| 亚洲蜜乳av| 手机在线看片免费人成视频| 东北丰满熟女国产一区| 日韩精品中文字幕一| 亚洲啪AⅤ永久无码| 另类图片综合| 综合久久久久久久久91| 午夜性生活av免费在线看| 国产精品麻豆成人av| 91福利网在线观看| 激情五月天插| 日韩亚洲精品一区二区| 精品v日韩欧美国产| 精品亚洲黄色片 国产精品导航一区二区| 久久春色| 天天夜躁日日躁狠狠2002| 搡老熟女免费视频| 99精品欧美一区二区三区桃色| 一区操逼| 亚洲欧美国产其他二区| 亚洲欧美日韩综合在线尤物 | 久久婷色| 99热这里只有精品99| 97久精品| 东北女人的毛片| 伊人国产av| 国产精品久久久久中文字幕| 成人性爱美曰韩| 91美女丝袜诱惑视频| 天天肏美女| 久久精品99久久久久久| 后入综合久久| 亚洲最新Av| 久久综合国产精品国产| 精品-91人妻子系列| 正在播放:深夜激情大战,自带黑丝袜全力输出骚穴 | 欧美精品偷拍| 加勒比少妇AV婷婷六月天超碰超碰| 亚洲中文字幕久久无码精品| 国产精品播放| 日韩不卡在线一区二区| 97综合在线| 好好的日:com久久九九| 黑人粗大V S日韩女优视频| 天天日熟妇| www.av家庭乱伦| 国产一进一出视频网站| 99精品在线观看| 亚洲综合有玛| 欧美性色欧美| 最近2018中文字幕在线高清第一页| 无色无码| 97舔舔| 欧美第五页| 麻豆三极片| 色色色色综合网| 日韩精品人妻系列无码天堂| 亚洲色图日韩丝袜制服一区二区五月在线 | 超碰在线91| 亚洲AV无码AV吞精久久久久| 丁香五月天啪啪| 青青伊人这里只有精品| 超碰人妻97| 91小视频| 超碰色中文| 欧美亚洲图片| 黑人精品成人一区二区三区| 色偷偷色偷偷欧美日韩| 99精品九九九九九九| 一级性爱网| 五月色丁香| 午夜福利在线合集| 午夜国产乱伦视频| 国产玖玖| 夜夜欧美| 色嗨嗨在线| 精品人妻一区二区三区视频| 欧美美女视频| 婷婷五月天色色| 精品美女少妇一区二区三区| 中文字幕在线免费观看2| 爱我干综合| 激情婷婷丁香网| 6080YYY午夜理论片在线观看| 亚洲s在线观看| 九九热精品视频六| 国产精品一区二区黄片| 色综合99999| 黄色香蕉视频网站一区| 中文高清一区二区的| 男人精品天堂一区| 久久伊人亚洲AV无码网站| 爱干爱射网啊啊啊| 屁股久久久久久久久久| 婷婷97| 台湾佬中文娱乐网久久久久久久久久com| 超碰无码加勒比| 国内精品久久国产,www香蕉久久五月丁香,亚洲欧美日韩精品永久在线,日本精品一 | 蜜臀久久99精品久久久久久无删减 | 欧美综合色图片| 日本www操操操| 久久视频,这里只有精品| 欧美黄色片在线播放| 狠狠2050在线观看| 亚洲无码太久| 欧美天堂超碰97| .精品人妻一区二区三| 一区二区三区 丝袜高跟| 成人羞羞视频国产| 97久久精品亚洲中六字幕| 婷婷久久五月综合激情| 97超碰无码网| a亚洲欧美色欲| 久久一二三四不卡| 91伊人久| 久久久久久久久国产| a天堂视频| 男人的天堂com| 日本99视频| 91少妇| 91亚州欧美| 人人操人人操草草| 1.igao73.com 加入收藏 免费专区 国产精品 中文字幕 日韩精品 欧美精品 精彩 | 精品国产一区二区三区久久久蜜臀| 人人么人人操| 亚洲人在线成线成人| 欧美十八禁导航成人| 亚av顶级裸体一区二区三区四区五区 | 99啪啪视频| 午夜激情成人在线观看| 欧美亚洲韩国视频十五区| 亚洲欧美国产日本一区二区三区| 91综合网站| AV一二区| 五月丁香社区婷婷日韩欧美精品影院| 夜夜操夜夜高潮夜夜爽国产精品区| 五月丁香在线| 欧美一区二区三区不卡高清视频| 97自拍一区| 女人喷水视频在线观看| 美女黄网| 国产天美传媒精品| 92福利社视频| 人人看人人插| 天天干人人乐| 色91综合网| 狠狠色婷婷7777久| 男人天堂网站| 囯产精品强| 色月天AV导航| 操逼操网| 国产亚洲日韩欧| 操操操日本的逼| 插穴性爱视频在线观看| 狠狠入| 校园春色亚洲欧洲| www99热| 美女操逼A A| 精品国产乱码久久久影院| 99999无码| 九九Av| 久久久亚洲| 亚洲AV永久无码精品成人调教| 97爱欧美| 国产一区二区三区精品观看啪| 国产成人亚洲精品无码最新在线| 国桃视频产巨乳精品一区二区在线| 国产欧美伊人| 3d成人精品一区二区| 精品免费视频国产一区| 天天综合网亚洲综合网| 久久一二三四不卡 | 青娱乐啪啪视频| 久久久18禁| 国产天天骚| 97最新在线播放视频| 国产AV毛片| 五月丁香黄色网| 五十路三区在线| 加勒比综合在线| 伊人网在线观看| 第四色色综合91| 婷婷久久五月天| 久久久久9| 能在线播放的国产三级| 中文字幕五月婷婷免费| 精品一区二区三区丰满熟女-亚洲欧美一区| 呻吟 欧美 日本 中出| 精品人妻一区二区三区-国产| 日本 欧美 国产一区| 国产真实野战在线视频| 999久久久免费精品国产牛牛| 亚州一区二区| 91色欧美| 亚洲熟女人妻中文字幕一区二区| 亚洲丝袜制服国产91_国语字幕免费观看完整版下载第5集_ | 亚洲高清内射| 观看视频图片一区二区三区| 在线一道啪| www.久久最新地址| 亚洲精品无码久久AV| 夜夜操美女| 天天弄天天操| 美女操逼A A| 伊人精品久久网站| 麻豆综合一区av| 国产精品原创巨作?v网站| 欧美一区二区日韩三区| 大象AV在线| 国产欧美日本亚洲精品| 日韩中文字墓| 免费日韩黄片| 永久免费av无码网站国产app| 黄片免费视频2019| 国产小黄片在线免费观看| 三级特黄60分钟播放|