亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營的一線實(shí)戰(zhàn)洞察。

C#物聯(lián)網(wǎng)平臺(tái)服務(wù)器框架源碼解析:從設(shè)備接入到心跳補(bǔ)償

C#物聯(lián)網(wǎng)平臺(tái)服務(wù)器框架源碼解析:從設(shè)備接入到心跳補(bǔ)償 做C#物聯(lián)網(wǎng)平臺(tái)服務(wù)器框架源碼這件事圈子里一直有爭議。很多人覺得C#做后端不夠“極客”物聯(lián)網(wǎng)就該上Java、Go或者干脆用Node.js。但真到一線做設(shè)備接入、做上位機(jī)聯(lián)動(dòng)、做工廠數(shù)據(jù)采集的時(shí)候你會(huì)發(fā)現(xiàn)C#的生態(tài)遠(yuǎn)比想象中能打WinForms/WPF做上位機(jī)界面順手Socket、Task、Channel這些原生能力做高并發(fā)接入也不虛再加上System.Text.Json、OPC UA、MQTT庫齊全一套語言能把設(shè)備端、網(wǎng)關(guān)端、服務(wù)端全串起來。這篇文章不聊空泛的架構(gòu)理念而是從一套實(shí)際可跑的C#物聯(lián)網(wǎng)平臺(tái)服務(wù)器框架源碼切入拆解設(shè)備接入層、會(huì)話管理、消息路由、指令下發(fā)、心跳補(bǔ)償這些核心模塊是怎么設(shè)計(jì)的每個(gè)關(guān)鍵位置為什么要這么寫踩過哪些坑。適合正在用C#做上位機(jī)、做設(shè)備管理平臺(tái)、或者想從零搭一套IoT服務(wù)端的開發(fā)者參考。1. 為什么用C#構(gòu)建物聯(lián)網(wǎng)服務(wù)器框架1.1 C#在這一賽道上的真實(shí)位置先糾正一個(gè)偏見。很多人一提C#就想到Windows Only想到桌面軟件。但.NET Core/ .NET 5以后C#早已是跨平臺(tái)的一等公民跑Linux服務(wù)器、跑Docker容器、跑ARM邊緣網(wǎng)關(guān)都沒問題。物聯(lián)網(wǎng)場景里服務(wù)器端最核心的訴求無非三件事大量設(shè)備長連接接入、頻繁的小報(bào)文收發(fā)、穩(wěn)定的7x24運(yùn)行。C#的異步編程模型正好是為這種IO密集型場景準(zhǔn)備的。另外有一個(gè)現(xiàn)實(shí)因素是團(tuán)隊(duì)技術(shù)棧。大量做工業(yè)物聯(lián)網(wǎng)、設(shè)備數(shù)據(jù)采集的團(tuán)隊(duì)原本就是用C#寫上位機(jī)、寫PLC通訊、寫MES對(duì)接的。如果服務(wù)器端換成另一門語言意味著團(tuán)隊(duì)要維護(hù)兩套技術(shù)棧。而用C#寫IoT服務(wù)器框架上位機(jī)、采集網(wǎng)關(guān)、服務(wù)端可以共享模型類、協(xié)議庫、工具類這個(gè)協(xié)作效率優(yōu)勢是很多技術(shù)選型文章不會(huì)告訴你的。我之前接過一個(gè)斷路器生產(chǎn)線的數(shù)據(jù)采集項(xiàng)目設(shè)備端是PLC加自定義TCP協(xié)議上位機(jī)用WinForms服務(wù)端要同時(shí)扛幾百臺(tái)設(shè)備的數(shù)據(jù)上報(bào)。當(dāng)時(shí)評(píng)估過用Java重寫后來還是決定用C#統(tǒng)一做。實(shí)際跑下來一臺(tái)4核8G的云主機(jī)輕松扛住了2000長連接CPU占用率穩(wěn)定在30%左右完全夠用。這說明C#在物聯(lián)網(wǎng)接入這個(gè)層面性能根本不構(gòu)成瓶頸反而是開發(fā)效率幫了大忙。1.2 源碼拆解前的整體架構(gòu)畫像我拆過不少開源的C#物聯(lián)網(wǎng)框架比如ThingsBoard的C#版網(wǎng)關(guān)、MQTTnet的源碼、一些工業(yè)網(wǎng)關(guān)項(xiàng)目發(fā)現(xiàn)它們雖然業(yè)務(wù)不同但骨架高度相似。一個(gè)成熟的C# IoT服務(wù)器框架通??梢詸M向切成四層設(shè)備接入層負(fù)責(zé)建立和維持TCP/SSL連接處理粘包半包完成設(shè)備認(rèn)證。常見實(shí)現(xiàn)是TcpListener加異步Socket或者基于MQTTnet封裝。會(huì)話管理層維護(hù)設(shè)備在線狀態(tài)、會(huì)話過期時(shí)間、心跳超時(shí)計(jì)時(shí)給每條連接綁定設(shè)備ID和業(yè)務(wù)ID。消息路由與業(yè)務(wù)處理層把設(shè)備上報(bào)的數(shù)據(jù)解析成統(tǒng)一報(bào)文按設(shè)備類型路由到不同的處理器同時(shí)承載指令下發(fā)邏輯。數(shù)據(jù)持久化與擴(kuò)展接口層把標(biāo)準(zhǔn)化的物模型數(shù)據(jù)寫入時(shí)序庫/關(guān)系庫對(duì)外提供查詢API以及連接消息隊(duì)列做異步解耦。這四層里面最容易被寫砸的是第一層和第二層。很多新手項(xiàng)目上來就在Receive回調(diào)里直接處理業(yè)務(wù)邏輯結(jié)果一個(gè)設(shè)備的數(shù)據(jù)解析卡頓拖垮整個(gè)接入線程。源碼拆解的價(jià)值就在這里看成熟項(xiàng)目怎么通過Channel或BlockingCollection做緩沖怎么用SemaphoreSlim控并發(fā)怎么用CancellationToken做優(yōu)雅停機(jī)。這些細(xì)節(jié)才是框架的魂。2. 框架源碼的核心模塊拆解2.1 設(shè)備接入層從TCPListener到異步Socket絕大多數(shù)自定義協(xié)議的設(shè)備接入起步都是TcpListener。源碼里典型的寫法是private readonly Socket _listenSocket new Socket(AddressFamily.InterNetwork, SocketType.Stream, ProtocolType.Tcp); public void Start(int port) { _listenSocket.Bind(new IPEndPoint(IPAddress.Any, port)); _listenSocket.Listen(1024); _acceptLoop Task.Run(AcceptLoopAsync); } private async Task AcceptLoopAsync() { while (!_cancellationToken.IsCancellationRequested) { var clientSocket await _listenSocket.AcceptAsync().ConfigureAwait(false); _ Task.Run(() HandleClientAsync(clientSocket, _cancellationToken)); } }這里有個(gè)關(guān)鍵設(shè)計(jì)AcceptAsync和HandleClientAsync全部用異步并且每個(gè)客戶端連接獨(dú)立跑一個(gè)邏輯任務(wù)互不阻塞。很多人問為什么不用BeginAccept那套舊APM模式因?yàn)閍wait能讓代碼按同步順序?qū)懙讓邮钱惒降目勺x性和可維護(hù)性好得多。AcceptLoopAsync里的while循環(huán)配合CancellationToken在服務(wù)重啟時(shí)可以優(yōu)雅退出。還有一個(gè)細(xì)節(jié)值得注意Accept循環(huán)里沒有異常捕捉的話一旦某個(gè)連接拋出SocketException整個(gè)Accept任務(wù)就死了之后所有設(shè)備都連不上。所以我看過的幾個(gè)成熟框架都會(huì)在循環(huán)體里套一個(gè)try-catch并且區(qū)分可恢復(fù)異常和致命異常。設(shè)備接入層的穩(wěn)定性往往不是靠多高深的算法而是靠這些防御性代碼堆出來的。2.2 會(huì)話管理與設(shè)備注冊(cè)中心會(huì)話管理是物聯(lián)網(wǎng)服務(wù)器區(qū)別于普通Web API的核心模塊。HTTP是無狀態(tài)的但設(shè)備長連接是強(qiáng)狀態(tài)的??蚣茉创a里通常會(huì)維護(hù)幾個(gè)核心字典public class DeviceSession { public string DeviceId { get; set; } public Socket ClientSocket { get; set; } public DateTime LastActiveTime { get; set; } public DateTime ConnectTime { get; set; } public string RemoteEndPoint { get; set; } public CancellationTokenSource SessionCts { get; set; } } public static class SessionManager { private static readonly ConcurrentDictionarystring, DeviceSession _sessions new(); public static bool AddOrUpdate(string deviceId, DeviceSession session) _sessions.TryAdd(deviceId, session); public static bool Remove(string deviceId) _sessions.TryRemove(deviceId, out _); public static DeviceSession Get(string deviceId) _sessions.TryGetValue(deviceId, out var s) ? s : null; }選ConcurrentDictionary而不是普通Dictionary是必須的因?yàn)樵O(shè)備連接、心跳更新、主動(dòng)斷開可能發(fā)生在不同線程。這里我想強(qiáng)調(diào)一個(gè)容易被忽略的點(diǎn)設(shè)備ID是什么時(shí)候確定的很多設(shè)備是“先連接、再上報(bào)設(shè)備ID”。那就需要在設(shè)備上報(bào)ID之前先給這個(gè)連接一個(gè)臨時(shí)會(huì)話標(biāo)識(shí)等收到認(rèn)證報(bào)文后再把臨時(shí)會(huì)話升級(jí)為正式會(huì)話。如果一上來就用遠(yuǎn)端IP做KeyNAT下多個(gè)設(shè)備共用出口IP直接全亂套。另外會(huì)話字典必須有過期清理機(jī)制。物聯(lián)網(wǎng)設(shè)備經(jīng)常是斷電、斷網(wǎng)不會(huì)禮貌地發(fā)一個(gè)斷開報(bào)文??蚣芾锿ǔC?0秒掃描一次活躍時(shí)間超過閾值就強(qiáng)制踢掉連接并清理資源。這個(gè)機(jī)制在下一節(jié)心跳里細(xì)說。2.3 消息路由與指令下發(fā)機(jī)制設(shè)備上報(bào)的數(shù)據(jù)不能都寫死在接入層里處理。成熟框架的做法是抽象出統(tǒng)一的DeviceMessage塞進(jìn)一個(gè)消息管道由業(yè)務(wù)層去訂閱和處理。我比較推薦用ChannelT做生產(chǎn)消費(fèi)模型因?yàn)樗?NET里是官方推薦的高性能異步隊(duì)列。private readonly ChannelDeviceMessage _messageChannel Channel.CreateUnboundedDeviceMessage(); public async Task PublishAsync(DeviceMessage message) { await _messageChannel.Writer.WriteAsync(message); } public async Task StartProcessingAsync() { await foreach (var message in _messageChannel.Reader.ReadAllAsync(_cancellationToken)) { await _router.RouteAsync(message); } }這個(gè)設(shè)計(jì)好在哪接入層只負(fù)責(zé)拆包、組包、寫入Channel就算業(yè)務(wù)處理慢也不會(huì)阻塞Socket接收。而指令下發(fā)則是反向的業(yè)務(wù)層生成一條指令通過會(huì)話管理器找到對(duì)應(yīng)的DeviceSession往它的Socket發(fā)送緩沖區(qū)寫指令報(bào)文。這里注意加鎖同一個(gè)Socket不能同時(shí)被多個(gè)線程寫否則報(bào)文會(huì)交叉錯(cuò)亂。實(shí)測中直接用SemaphoreSlim對(duì)每個(gè)會(huì)話的發(fā)送做串行化就夠用沒必要引入復(fù)雜的鎖機(jī)制。2.4 心跳檢測與離線補(bǔ)償心跳是IoT服務(wù)端最容易翻車的地方。我見過不少人把心跳做成“每次收到任何數(shù)據(jù)就刷新LastActiveTime”這個(gè)思路沒大問題但要注意區(qū)分“設(shè)備正常上報(bào)業(yè)務(wù)數(shù)據(jù)”和“設(shè)備還活著但無業(yè)務(wù)數(shù)據(jù)”。有些NB-IoT設(shè)備為了省電平時(shí)完全靜默只有心跳。那服務(wù)端就要定義一種心跳報(bào)文設(shè)備每隔N秒發(fā)一次。源碼里心跳任務(wù)通常是一個(gè)獨(dú)立的Timer循環(huán)比如每10秒掃一次所有會(huì)話檢查LastActiveTime是否超過30秒。超時(shí)的話先發(fā)一次心跳探測報(bào)文再等5秒沒回應(yīng)就判定離線。這樣的兩段式設(shè)計(jì)比一次性踢掉要人性化至少給弱網(wǎng)環(huán)境下的設(shè)備一個(gè)機(jī)會(huì)。離線補(bǔ)償這塊很多框架只做到了“記錄離線時(shí)間”沒做“離線期間的數(shù)據(jù)補(bǔ)償”。如果是車間設(shè)備網(wǎng)絡(luò)閃斷幾十秒PLC里的數(shù)據(jù)積累了幾十條重連后應(yīng)該支持設(shè)備主動(dòng)補(bǔ)發(fā)。服務(wù)端要做的是在會(huì)話恢復(fù)時(shí)檢查該設(shè)備是否有未下發(fā)的指令或者斷點(diǎn)續(xù)傳的批次號(hào)。這部分在工程上復(fù)雜度不低源碼里常見的做法是引入一個(gè)PendingCommandStore把離線期間的指令存起來等設(shè)備重連認(rèn)證完畢后自動(dòng)重發(fā)。3. 關(guān)鍵實(shí)現(xiàn)細(xì)節(jié)與避坑指南3.1 協(xié)議設(shè)計(jì)與數(shù)據(jù)封包寫接入層之前先把協(xié)議定好不然后面重構(gòu)到哭。物聯(lián)網(wǎng)設(shè)備報(bào)文常用的有幾種純文本JSON調(diào)試方便但浪費(fèi)流量、二進(jìn)制頭可變長體工業(yè)現(xiàn)場主流、MQTT標(biāo)準(zhǔn)報(bào)文適合走網(wǎng)關(guān)的場景。我推薦自定義二進(jìn)制協(xié)議時(shí)至少包含這幾個(gè)字段幀頭魔數(shù)、報(bào)文長度、命令字、設(shè)備ID、數(shù)據(jù)區(qū)、校驗(yàn)位、幀尾。報(bào)文長度是為了解決分包粘包命令字用于路由校驗(yàn)位建議用CRC16而不是簡單的累加和防止工控環(huán)境下的電磁干擾導(dǎo)致數(shù)據(jù)錯(cuò)亂。有一個(gè)很多源碼示例都不會(huì)教的點(diǎn)幀頭不要用0xFF這種過于簡單的字節(jié)。因?yàn)槿绻麛?shù)據(jù)區(qū)里也出現(xiàn)連續(xù)多個(gè)0xFF解析器容易誤判幀頭。更穩(wěn)妥的是用兩到三個(gè)字節(jié)的固定魔數(shù)組合比如0xAA 0x55加版本號(hào)解析時(shí)先做狀態(tài)機(jī)匹配再做長度校驗(yàn)。3.2 半包粘包的解決方案這是TCP編程永恒的經(jīng)典問題。很多C#新手在Receive回調(diào)里拿到的byte[]以為就是完整的一幀結(jié)果數(shù)據(jù)一多就亂碼。解決思路其實(shí)就一句用一個(gè)內(nèi)存緩沖區(qū)累積收到的字節(jié)每次從緩沖區(qū)里嘗試解析出完整幀。源碼里常見的是繼承Buffer類維護(hù)一個(gè)Listbyte或MemoryStreampublic class ReceiveBuffer { private readonly Listbyte _buffer new(); private readonly object _lock new(); public void Append(byte[] data) { lock (_lock) { _buffer.AddRange(data); } } public Listbyte[] ExtractFrames(byte header1, byte header2, int minLength, byte tail) { var frames new Listbyte[](); lock (_lock) { while (TryExtractOneFrame(header1, header2, minLength, tail, out var frame)) { frames.Add(frame); } } return frames; } }提取單幀的邏輯要循環(huán)處理一次可能從緩沖區(qū)里解出多幀。每次提取成功后要從緩沖區(qū)頭部移除相應(yīng)字節(jié)。如果緩沖區(qū)里數(shù)據(jù)不夠一幀就等著下一包到來再拼。用lock是因?yàn)镽eceive回調(diào)和定時(shí)清理可能在多線程下同時(shí)操作緩沖區(qū)。這個(gè)模塊是整個(gè)接入層最容易出bug的地方值得多花時(shí)間寫單元測試。3.3 線程模型Task、async/await與線程安全現(xiàn)代C#寫高并發(fā)服務(wù)端基本離不開Task和async/await。但很多人理解有偏差以為Task.Run就是異步。實(shí)際上異步的核心是不占用線程等待IO。比如clientSocket.ReceiveAsync它發(fā)起系統(tǒng)調(diào)用后立刻返回一個(gè)Task線程就釋放了等到內(nèi)核緩沖有數(shù)據(jù)時(shí)線程池再調(diào)度continuation繼續(xù)執(zhí)行。這也就是為什么異步Socket能支撐成千上萬連接的原因——不是開了上萬線程而是大部分線程在等待IO時(shí)都“釋放”了。線程安全方面最容易出問題的是事件回調(diào)。比如設(shè)備狀態(tài)變化事件可能在Socket接收線程、心跳定時(shí)器線程、業(yè)務(wù)處理線程同時(shí)觸發(fā)。如果直接在事件里操作UI控件、寫數(shù)據(jù)庫幾乎是必然炸。解決思路是把事件統(tǒng)一投遞到同步上下文或者用Channel把所有事件集中起來由單線程消費(fèi)者處理。我自己更傾向后者因?yàn)榉?wù)器環(huán)境往往沒有SynchronizationContext可用Channel模型更通用。3.4 委托事件在源碼解耦中的運(yùn)用C#里的委托和事件在物聯(lián)網(wǎng)框架里最大的價(jià)值是讓框架層與業(yè)務(wù)層解耦。比如框架定義了一個(gè)DeviceConnectedHandler委托業(yè)務(wù)層自己去訂閱設(shè)備上線事件public delegate Task DeviceConnectedHandler(string deviceId, DeviceSession session); public event DeviceConnectedHandler? DeviceConnected; public async Task RaiseDeviceConnectedAsync(string deviceId, DeviceSession session) { if (DeviceConnected ! null) { await DeviceConnected.Invoke(deviceId, session); } }用async void去處理事件是最忌諱的異常會(huì)讓進(jìn)程直接崩。所以事件處理器統(tǒng)一用FuncTask委托異常在框架層統(tǒng)一捕獲記錄。另外還要小心事件訂閱導(dǎo)致的內(nèi)存泄漏——業(yè)務(wù)層訂閱了事件卻不取消框架對(duì)象被業(yè)務(wù)對(duì)象引用GC無法回收。我建議框架內(nèi)部用WeakEvent模式或者至少在業(yè)務(wù)層生命周期結(jié)束時(shí)顯式Unsubscribe。4. 從零搭建一個(gè)最小可運(yùn)行框架4.1 準(zhǔn)備工程結(jié)構(gòu)光看源碼不落地等于白看我建議你按下面的結(jié)構(gòu)自己建一個(gè)Demo一行行敲一遍比復(fù)制粘貼印象深得多IotServer.Core核心類庫放會(huì)話管理、消息路由、協(xié)議解析。IotServer.Protocols協(xié)議實(shí)現(xiàn)默認(rèn)先做自定義二進(jìn)制協(xié)議。IotServer.DeviceSimulator模擬設(shè)備端用于本地聯(lián)調(diào)和壓測。IotServer.ServerHost控制臺(tái)宿主程序負(fù)責(zé)啟動(dòng)監(jiān)聽和日志。這個(gè)結(jié)構(gòu)拆出了模擬器非常關(guān)鍵。調(diào)試設(shè)備接入時(shí)候沒有真機(jī)也能模擬幾千個(gè)連接壓測框架。我自己調(diào)試時(shí)Simulator會(huì)用異步并發(fā)開N個(gè)Socket連接服務(wù)端每個(gè)客戶端隨機(jī)時(shí)間上報(bào)報(bào)文同時(shí)校驗(yàn)服務(wù)端是否如實(shí)返回ACK這個(gè)聯(lián)調(diào)模式可以覆蓋掉大量邊界場景。4.2 服務(wù)端核心代碼實(shí)戰(zhàn)下面給一個(gè)最精簡但能跑通全流程的接入層核心代碼注掉了解析細(xì)節(jié)保留結(jié)構(gòu)public class IotServer : IDisposable { private readonly Socket _listenSocket; private readonly SessionManager _sessionManager; private readonly ChannelDeviceMessage _messageChannel; private readonly CancellationTokenSource _cts new(); private readonly ReceiveBuffer _receiveBuffer new(); public IotServer(int port) { _listenSocket new Socket(AddressFamily.InterNetwork, SocketType.Stream, ProtocolType.Tcp); _listenSocket.Bind(new IPEndPoint(IPAddress.Any, port)); _listenSocket.Listen(1024); _sessionManager new SessionManager(); _messageChannel Channel.CreateUnboundedDeviceMessage(); } public async Task StartAsync() { _ Task.Run(AcceptLoopAsync); _ Task.Run(ProcessMessageLoopAsync); _ Task.Run(HeartbeatCheckLoopAsync); } private async Task AcceptLoopAsync() { while (!_cts.IsCancellationRequested) { try { var socket await _listenSocket.AcceptAsync(); _ HandleClientAsync(socket); } catch (Exception ex) when (!(ex is ObjectDisposedException)) { // 記錄異常繼續(xù)接收新連接 } } } private async Task HandleClientAsync(Socket socket) { var session new DeviceSession { ClientSocket socket, ConnectTime DateTime.Now, LastActiveTime DateTime.Now }; var buffer new byte[4096]; while (!_cts.IsCancellationRequested) { try { int received await socket.ReceiveAsync(buffer, SocketFlags.None); if (received 0) { _sessionManager.Remove(session.DeviceId); socket.Close(); return; } session.LastActiveTime DateTime.Now; _receiveBuffer.Append(buffer.AsSpan(0, received).ToArray()); foreach (var frame in _receiveBuffer.ExtractFrames()) { var message ProtocolParser.Parse(frame); if (message null) continue; if (message.Type MessageType.Heartbeat) { session.LastActiveTime DateTime.Now; } await _messageChannel.Writer.WriteAsync(message); } } catch (SocketException) { _sessionManager.Remove(session.DeviceId); socket.Close(); return; } } } private async Task ProcessMessageLoopAsync() { await foreach (var message in _messageChannel.Reader.ReadAllAsync(_cts.Token)) { // 這里分發(fā)到具體業(yè)務(wù)處理器 Console.WriteLine($收到設(shè)備 {message.DeviceId} 數(shù)據(jù): {BitConverter.ToString(message.Payload)}); } } private async Task HeartbeatCheckLoopAsync() { using var timer new PeriodicTimer(TimeSpan.FromSeconds(10)); while (await timer.WaitForNextTickAsync(_cts.Token)) { var expired _sessionManager.GetExpiredSessions(TimeSpan.FromSeconds(30)); foreach (var session in expired) { _sessionManager.Remove(session.DeviceId); session.ClientSocket.Close(); } } } }PeriodicTimer是.NET 6以后比較好用的定時(shí)器比Thread.Sleep循環(huán)優(yōu)雅也比System.Threading.Timer回調(diào)更容易配合async。心跳檢查用一個(gè)GetExpiredSessions批量撈出超時(shí)會(huì)話然后統(tǒng)一清理避免了在遍歷字典時(shí)直接刪除導(dǎo)致的并發(fā)修改問題。4.3 協(xié)議解析器的幾個(gè)關(guān)鍵校驗(yàn)協(xié)議解析器不是簡單地把字節(jié)按偏移量切出來一定要做三層校驗(yàn)。第一層校驗(yàn)幀頭幀尾防止字段錯(cuò)位。第二層校驗(yàn)長度字段防止長度被污染導(dǎo)致申請(qǐng)超大緩沖區(qū)。第三層校驗(yàn)CRC保證數(shù)據(jù)區(qū)完整無誤。只有三層全過才把這個(gè)報(bào)文交給業(yè)務(wù)層去處理。解析失敗時(shí)不要直接斷開連接。很多設(shè)備程序有bug偶發(fā)發(fā)一幀畸形數(shù)據(jù)服務(wù)端直接斷開會(huì)讓設(shè)備進(jìn)入反復(fù)重連的死循環(huán)。正確做法是記錄錯(cuò)誤計(jì)數(shù)連續(xù)錯(cuò)滿一定次數(shù)比如10次再踢掉防止惡意或故障設(shè)備刷無效報(bào)文打爆日志系統(tǒng)。4.4 壓測與性能調(diào)整實(shí)測記錄框架寫完我用Simulator開500個(gè)并發(fā)連接每個(gè)連接每2秒上報(bào)一幀128字節(jié)報(bào)文跑了30分鐘服務(wù)端是Win11筆記本上的4核8G環(huán)境。Gc每秒約15次但Gen2回收極少CPU占用在20%左右所有連接存活率100%消息隊(duì)列未出現(xiàn)積壓。這說明簡單的Channel模型足夠應(yīng)對(duì)常規(guī)規(guī)模。如果設(shè)備量級(jí)到1萬以上有幾個(gè)調(diào)整方向一是把Socket.ReceiveAsync換成SocketTaskExtensions.ReceiveAsync并配合SocketAsyncEventArgs池化二是把單Channel改成按設(shè)備哈希分區(qū)到多個(gè)Channel每個(gè)Channel一個(gè)消費(fèi)者避免單消費(fèi)者吞吐受限三是數(shù)據(jù)持久化走批量寫入比如每5秒刷一次庫而不是每幀一條insert。這些在源碼里都能看到對(duì)應(yīng)的優(yōu)化痕跡。5. 常見問題與排查技巧實(shí)錄5.1 設(shè)備連接后很快被服務(wù)端踢掉遇到這個(gè)問題第一反應(yīng)查心跳。很多設(shè)備連上后不發(fā)任何數(shù)據(jù)而服務(wù)端默認(rèn)30秒內(nèi)沒有活躍就當(dāng)作超時(shí)踢掉。排查時(shí)先看服務(wù)端日志有沒有Session expired然后抓包確認(rèn)設(shè)備是否真的在發(fā)心跳。有一種情況很有迷惑性設(shè)備的心跳報(bào)文格式錯(cuò)了服務(wù)端協(xié)議解析失敗解析器一直丟包于是活躍時(shí)間不更新照樣被踢。這種就要把解析失敗日志打出來看幀頭校驗(yàn)和CRC校驗(yàn)?zāi)囊徊綊斓?。另一個(gè)隱藏坑是設(shè)備連接用的是WIFI信號(hào)不穩(wěn)定TCP層已經(jīng)斷開但服務(wù)端沒收到FIN包這種只能靠心跳超時(shí)機(jī)制兜底。建議把心跳間隔設(shè)成設(shè)備上報(bào)間隔的一半并且至少容忍三個(gè)周期超時(shí)才踢。5.2 CPU飆高與100%占用排查服務(wù)端CPU飆高常見的原因有三類。一是死循環(huán)比如while循環(huán)里沒有正確的等待異常時(shí)不斷空轉(zhuǎn)重試。二是鎖競爭lock或SemaphoreSlim被高并發(fā)爭搶導(dǎo)致線程上下文切換飆升。三是消息隊(duì)列消費(fèi)者吞吐不足生產(chǎn)者太快隊(duì)列無限膨脹內(nèi)存和CPU雙高。排查工具方面Windows上用dotnet-dump抓dump配合dotnet-stack看線程棧是正道。Linux上可以用dotnet-counters先看線程池隊(duì)列長度和鎖競爭計(jì)數(shù)再?zèng)Q定要不要抓dump。不要靠猜實(shí)測里“Sleep 10ms防止CPU高”這類土辦法只能掩蓋問題不能解決問題。5.3 數(shù)據(jù)亂碼與字節(jié)序誤解做工業(yè)設(shè)備對(duì)接時(shí)數(shù)據(jù)亂碼多半不是編碼問題而是字節(jié)序問題。PLC傳上來的Int32可能是大端也可能是小端取決于設(shè)備廠商。C#里BitConverter.ToInt32默認(rèn)按系統(tǒng)字節(jié)序x86/x64都是小端。如果你在x86上解析大端數(shù)據(jù)需要先Array.Reverse前4字節(jié)或者用BinaryPrimitives.ReverseEndianness。還有一個(gè)常見坑是C#的char是UTF-16的2字節(jié)而設(shè)備傳過來的ASCII是1字節(jié)。直接把byte轉(zhuǎn)char會(huì)得到奇怪的字符。正確做法是Encoding.ASCII.GetString(data, index, length)。源碼里所有字符串字段解析都應(yīng)該顯式聲明編碼格式絕對(duì)不要依賴系統(tǒng)默認(rèn)編碼。5.4 內(nèi)存泄漏與句柄泄漏IoT服務(wù)器跑幾個(gè)月不重啟內(nèi)存緩慢上漲這種問題一般出在兩類地方。一是事件訂閱沒取消前面提到過。二是字節(jié)數(shù)組被長期引用比如ReceiveBuffer里的Listbyte無限增長說明提取幀的邏輯有bug某種報(bào)文永遠(yuǎn)湊不齊一幀導(dǎo)致緩沖區(qū)越來越大。Socket句柄泄漏往往表現(xiàn)為“設(shè)備連不上還報(bào)Address already in use”。排查時(shí)用netstat看TIME_WAIT狀態(tài)是否堆積如果連接正常斷開但TIME_WAIT很多可以在Socket設(shè)置SetSocketOption(SocketOptionLevel.Socket, SocketOptionName.ReuseAddress, true)。但注意這個(gè)選項(xiàng)要在Bind之前設(shè)置才生效。6. 與上位機(jī)、PLC聯(lián)動(dòng)場景的擴(kuò)展6.1 C#連接西門子OPC與底層設(shè)備很多時(shí)候物聯(lián)網(wǎng)平臺(tái)不只是跟自己的設(shè)備通訊還要對(duì)接工廠里的PLC。工業(yè)現(xiàn)場最常見的對(duì)接方式就是OPC尤其是西門子PLCOPC UA是繞不開的。C#生態(tài)里有兩個(gè)常用方案一個(gè)是開源的OPCFoundation.NetStandard.Opc.Ua一個(gè)是S7netplus直接用S7協(xié)議讀西門子PLC數(shù)據(jù)。我在實(shí)際項(xiàng)目中是這樣分工的服務(wù)端框架保持純粹的設(shè)備接入和數(shù)據(jù)處理通過一個(gè)獨(dú)立的設(shè)備網(wǎng)關(guān)進(jìn)程去對(duì)接PLC。網(wǎng)關(guān)進(jìn)程負(fù)責(zé)OPC連接、輪詢、斷線重連然后把數(shù)據(jù)翻譯成統(tǒng)一的物模型報(bào)文再上報(bào)給服務(wù)端。這樣即使PLC型號(hào)從S7-200換到S7-1500或者從OPC DA切到OPC UA改動(dòng)只限定在網(wǎng)關(guān)進(jìn)程服務(wù)端和上層的可視化不用動(dòng)。這里提醒一句OPC DA是基于COM/DCOM的部署時(shí)權(quán)限模型很折磨人建議新項(xiàng)目直接走OPC UA。而且OPC UA分Client和Server兩種角色你的網(wǎng)關(guān)可能是Client去讀PLC的Server也可能是Server透傳數(shù)據(jù)給上層組態(tài)軟件別搞混了。6.2 對(duì)接第三方物聯(lián)網(wǎng)平臺(tái)SDK有些項(xiàng)目不做全部自研而是對(duì)接已有云平臺(tái)比如阿里云物聯(lián)網(wǎng)平臺(tái)。這類平臺(tái)一般提供Android SDK、Java SDK、C# SDK或HTTP API。C#對(duì)接時(shí)最核心的是把設(shè)備認(rèn)證的productKey、deviceName、deviceSecret管理好以及理解平臺(tái)側(cè)的Topic和物模型規(guī)范。實(shí)際過程中容易踩的坑是SDK版本碎片化。有些云平臺(tái)的C# SDK停止維護(hù)很久依賴的底層HTTP庫和JSON庫版本很老和你的框架沖突。解決辦法是單獨(dú)開一個(gè)IotPlatformAdapter項(xiàng)目把所有平臺(tái)SDK依賴隔離在適配層上層只暴露統(tǒng)一的SendTelemetry和HandleCommand接口。這樣哪天換平臺(tái)只要替換適配層的實(shí)現(xiàn)類。這也是我在多個(gè)項(xiàng)目里反復(fù)驗(yàn)證過的穩(wěn)定方案。6.3 從框架到產(chǎn)品化要補(bǔ)齊的幾個(gè)東西一個(gè)能跑通Demo的框架距離一個(gè)能上線運(yùn)行的產(chǎn)品中間還差不少東西。第一是認(rèn)證授權(quán)設(shè)備接入不能裸奔至少要支持每臺(tái)設(shè)備獨(dú)立Token或者證書認(rèn)證防止別人偽造設(shè)備上報(bào)假數(shù)據(jù)。第二是配置中心端口、心跳閾值、日志級(jí)別、數(shù)據(jù)庫連接串都要能遠(yuǎn)程調(diào)整不能每次改配置都重新編譯部署。第三是監(jiān)控告警服務(wù)端自身的CPU、內(nèi)存、在線設(shè)備數(shù)、消息積壓數(shù)必須要有指標(biāo)暴露很多框架會(huì)用Prometheus格式的/metrics接口C#里可以接prometheus-net庫。另一個(gè)很容易被忽視的是固件OTA升級(jí)。物聯(lián)網(wǎng)設(shè)備要支持遠(yuǎn)程升級(jí)服務(wù)端就得做升級(jí)包管理、設(shè)備版本控制、斷點(diǎn)續(xù)傳、灰度發(fā)布。這個(gè)模塊跟設(shè)備接入層完全兩個(gè)復(fù)雜度等級(jí)。如果業(yè)務(wù)有這個(gè)需求建議單獨(dú)立項(xiàng)不要塞在原來的服務(wù)器框架里硬改。7. 最后分享幾個(gè)我踩過幾輪才摸透的經(jīng)驗(yàn)先說說日志。IoT服務(wù)端日志一定要按設(shè)備ID打索引不然線上定位問題像大海撈針。我常用的格式是[時(shí)間][設(shè)備ID][會(huì)話Key][事件]哪怕是低級(jí)別日志也帶上設(shè)備ID方便grep單臺(tái)設(shè)備的全生命周期。前期怕日志量大而省略設(shè)備ID的做法后面基本都用昂貴的排查時(shí)間還回來了。再有就是所有時(shí)間字段統(tǒng)一用UTC存儲(chǔ)顯示層再轉(zhuǎn)本地時(shí)區(qū)。物聯(lián)網(wǎng)設(shè)備可能分布在全國甚至全球各地如果服務(wù)端按服務(wù)器本地時(shí)間落庫夏令時(shí)和時(shí)區(qū)一變化數(shù)據(jù)排序和分析全是坑。我踩過最慘的一次是設(shè)備上報(bào)時(shí)間用了字符串格式且不帶時(shí)區(qū)后來做數(shù)據(jù)回放時(shí)發(fā)現(xiàn)時(shí)間線錯(cuò)亂被迫寫了數(shù)據(jù)修復(fù)腳本洗了幾百萬條記錄。最后是關(guān)于框架迭代節(jié)奏的建議。很多新手拿到源碼就想把每個(gè)模塊都優(yōu)化到完美實(shí)際上接入層、會(huì)話層穩(wěn)定后優(yōu)先做業(yè)務(wù)可配置化而不是繼續(xù)挖性能。大多數(shù)IoT項(xiàng)目卡住不在并發(fā)性能而在業(yè)務(wù)需求一天三變??蚣芰粝伦銐虻臄U(kuò)展點(diǎn)和接口抽象比什么都重要。等真的出現(xiàn)性能瓶頸了再回頭優(yōu)化那時(shí)候需求穩(wěn)定了你才知道該往哪個(gè)方向調(diào)。這個(gè)框架源碼我用到現(xiàn)在最大的感觸是物聯(lián)網(wǎng)開發(fā)沒有銀彈所謂高效就是把那些反復(fù)出現(xiàn)的東西沉淀成可靠的庫。C#在這條路上確實(shí)是一條值得走下去的路。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
麻豆精品久久久久久久| 亚洲高清在线se| 五月天综合网| 人人色人人射人人妻| 69久久久久久久久久久久久| 情色图区| av凤凰久久久| 日本亚洲熟女视频| 116美女午夜| 中文字幕久久精品一区| 免费视频一二三区| 思思在线免费视频| 好吊爽好吊爽在线视频,中文字幕精品一区二区日本,国产良妇出轨视频在线观看, | 黑操B| 囯产精品强| 日本一区不卡| 五月婷在线| 久久久久网站-538在线视频-欧美永久乱码 | 青青国产精品在线| 精品国产Av无码久久久亚洲| 丝袜天堂| 婷婷综合伊人一区| 国产精品爽爽va在线观看98| 国产盗摄美女如厕大神作品在线观看| 69天堂| 日韩欧美字幕亚洲一区二区| 色综合20p| 国产日本一区二区三区蜜臀在线观看| 3571色综合一区二区二区| 九九九免费视频| 色 婷97| 国产日韩无码一区二区三区久久区| 人人贴人人摸| 久操网在线| 国产精品午夜AV完会免费| 黄色免费网页无码| 日韩在线电影| 欧美激情 日韩精品| 国产高清亚洲日韩一区| 久久久久久大| 伊香蕉综合久久久久久久噜噜噜| 国产自产91区13区| 久色网| 2017天天操| 久草五月| av日韩国产一区二区| 麻豆婷婷成人一二三| 18禁的网站在线| 蜜区区视频79 | 色婷婷国产精品一区在线观看| 999岛国大片| 91麻豆一二三区| 色综合久久久久| 色就色综合| 熟女91网| 日韩二级| 久久这里只精品99re66图| 亚洲自拍欧美国产首页网曝| 亚洲欧美国产中文字幕| 色欧美天天| 欧美高清18A片| 熟女天天干| 92人人操人人| 看一级黄色视频| 欧美成熟性爱精品| 亚洲国产97在线精品一区| 亚洲色图在线视频| 免费看一级a性色生活片久久无| 亚洲成a人在线观看久| 91无遮挡| 在线日韩日本亚洲国产| 人妻丰满熟妇av无码区蜜桃| 成功精品影院| 五月天偷拍| 思思热免费视频观看| 极品尤物自安慰| 91精品91久久久久77777俄罗斯老妇姓x| 五月婷婷丁香| 大香蕉欧美伊| 男插女青青影院| 热天堂一区二区| 你懂的在线观看区国产| 我爱操| 精品国产乱码久久久久久久| 久久69| 久久熟女嫩草成人片免费| 精品人妻一区二区乱码一区二区| 人妻精品4K4K4K4K4| 校园春色宗合网| 加勒比av网| 在线情色电影 91大| 国产和美国毛片| 99只有精品| 97精品在线视频| 无码乱人伦中文视频| 天天操夜夜操| wwe 天天干.com| 亚洲偷拍欧美激情| 五十路成人在线视频二区三区| 亚洲美女30b| 性爱欧美五月| 久久男人的天堂国产| 熟妇最新先锋一二三区| 超碰欧美97资源| 舔足天天操天天射| 中国zzijzzijzzwww精品| 国产午夜激片Av毛片不卡| 爱射综合| 91超碰丝袜制服| 久操免费观看| 操人人| 亭亭丁香激情| AAAA级日本片免费视频| 久久久久久久久国产| 高清无码91| 不卡中文字幕aⅴ在线| 爱媛媛久久国产福利| 国产乱弄免费在线视频。| 欧美美逼| 91c色| 激情五月婷婷| 美国精品国产精品| 一级黄碟在线观看| 人人操人人色网| 再深点灬舒服灬太大了好硬好爽| 精产国品一区二三产品| 黄色小视频日本txt| 999 久久久| 国产精品操| 尹人大香蕉视频在线| 色爽——AV| 丁香六月婷婷| 国产精品九九九| www.yw尤物| wuyechaopeng| 最新av网站在线观看| 热热色青青草| 婷婷六月天| 搡老女人老熟女91老熟女综合网| 狠狠干婷婷| 四虎精品永久在线观看| 亚洲伊人久久精品狠狠在线| 国产日逼视频| 欧美综合自拍亚洲综合图| 无码免费精品高清| 国产精品亚洲色婷婷久久久| 久久久久久久| 91爰爱欧美| 国产精品一区二区三区,亚洲综合| 动漫片子网站3黄| 人人模人人看| 道久久五香丁月婷婷激情综合| 久草视频在线视频在线视频在线观看| 人妻少妇久久中文| 欧美 亚洲 另类 综合| 国产a级午夜毛片| 九九AV| 精国久久一区二区三区98| 日韩成人大片在线观看| 亚洲毛片基地专区| 加勒比av中文| 国内精品不卡无毒99999| 日本亚洲熟女视频| 在线97视频| 中文久久一区| 天天干一区二区| 黑操B| 91色色网站| 91久久精品美女高潮喷水| 色婷婷综合网| 国产麻豆福利av在线播放| 性色aV一区二区三区噜噜| 最新亚洲风情电影| 国产精品成人无码av| 3d成人精品一区二区| 欧美午夜熟妇黑人精品91| 男人的亚洲天堂| 日欧美色| 少妇色综合| 中文字幕乱码人妻一区二区三区,99精品| 婷婷午夜成人色中色| 亚洲一卡二卡在线免费| 看免费一级在线播放毛片| 日韩欧美亚洲自拍偷拍| 欧美人与动性人交a| 欲女人妻性色av| av在线浏览| 东北女人av| 啊啊啊啊嗯嗯嗯用力好爽| 亚洲操人| 久久久久精| 美女91av| 后入式五六区| 老女人综合| 国产精品久久久久9999小说| 日韩中文字幕视频| 色色色网站| 久久久久久免费电影| 五月天久久久| 大肉棒导航| 欧美色日| 青青在线视频日韩欧美| 蜜臀99久久精品久久久懂爱| 涩综合导航| 超碰天天操| 亚洲午夜蜜臀| 国产福利一区二| 久久久国产三级黄色片| 91欧美美女日韩国产婷婷| 黄色二级片网站| 日韩人妻无码精品系列| 亚洲午夜未满十八勿入网站日本又色又爽又黄| 1769一区二区| 久久夜嗨| 五月天婷婷社区| 亚洲午夜福利在线影院 | 亚洲精品一区中文字幕乱码| 久久天天躁日日躁狠狠躁 | 亚洲熟女乱综合一区二区在线-...亚洲国产日韩欧美一区二区三区,久久久久久精 | 亚洲午夜AV| 91精品丝袜久久久久久无码人妻| 国产农村妇女毛片精品久久| 久久久久亚洲三级电影| 亚洲大色堂| 美女天天干| 麻豆2区1区天美| 久久精品成人一区二区三区蜜臀| 久久社区一区二区三区| 日本中文字幕一区| 亚洲日韩视频二区| 美女诱惑一区| 欧美在线55555| 日本精品不卡一二三区| 一二视频神马久久传媒| 国产精品久久aV| 麻豆成人av| 超碰精品日韩欧美国产| 亚洲熟妇综合久久久久久| www色婷婷| 神马久久久久久久| 久久九操在线观看| 日韩A优精品在线观看| 精品国产乱码久久久| 久操com| 精品对白久久不卡| 中文乱码99| 99热99re超碰精品| 人妻一区二区三区四区视频| 偷拍导航视频网站| 久久久亚洲精品电影免费看| 日本性交操一区二区不卡系列| 欧美日韩理论一区| 色色色色电影网| 人妻精品一区二区三区| 麻豆国产原创AV色哟哟| 中日韩一区二区三区欧美| 97久久国产亚洲精品超碰热| 激情五月天综合网| 人人操肉肉| 日本孕妇一区二区视频操逼免费看 | 日骚逼视频| 97自拍一区| 国产精品自产拍在线观看社区| AV男人天堂网| 香蕉在线一区二区三区| 99久久e免费热视| 精品高清牛人盗摄一区二区三区中文字幕A片免费在线观看 | 日日爱99| 啊啊啊啊在线播放| 厕所偷拍在线| 九九热超碰97亚洲最新香蕉 | 女优视频第10页| 人妻中文字幕精品无码 | 久肏视频字幕| 天天舔九色婷婷| 日本午夜福利影院| 丝袜美腿欧美| 青青草啪啪网| 久偷拍欧美日韩三区| 91女网站| 91老熟女老女人国产老太| 色鬼在线综合| 超碰97资源中文字幕| 884t在线| 亚洲十八禁止| 亚洲女人毛茸茸91| 伊人aaa| 狠狠操狠狠燥| 91电影色诱| 亚洲宗合网| 91总综合网| 亚洲天天精品| 国产精品电| 无卡一区=区| 免费视频一二三区| 在线人成亚洲视频免费观看| 成人无遮挡毛片免费看| 少妇熟女1区2区3区| 很黄很色的视频在线观看| 一区二区三区探花在线观看| 亚洲欧美国产va在线播放频| 亚洲一卡2卡3卡4卡乱码网站 | 99ri在线视频| 97国产色综合| 蜜桃狠狠色伊人亚洲综合| 天欧美在线| 婷婷色网| 呦呦一区| 无码精品久久| 黄色av一区二区在线| 久久熟女人| 综合激情97| 国产成人啪一区二区| 骚日日av| 国产乱伦亚洲| 久草久热| 欧美综合国产精品久久丁香| 久久精品国产亚洲AV嘿嘿| 在线天堂999| 日韩精品怡红院| 91亚洲高清| 六月丁香网| 色九九九综合| 极品另类| 免费a在线播放v| 色欲色香天天天综合网www-亚洲综合国| 日日躁天天躁狠狠躁| 水滴偷拍| 五月色综合| 色呦色呦色精品| 亚洲精品国产专区在线观看| 狼天天狼天天大香蕉| 中字一区| 久久直播国产| 91爱看| 亚洲春色欧美激情自拍| 麻豆久久久久久久久丝袜 | 狠狠操狠狠操操| 五月丁香六月激情| 久久蜜桃一区二区| 丁香六月综合激情| 亚洲综合嫩| 四色永久成人网站| 亚洲国产97在线精品一区| 亚洲精品免费中文字幕| 久久国语| 抽插无码高清一区| 免费男人的天堂| AA丁香综合激情| 啊啊啊啊啊舒服| 久久一区二区三区入口| 嗯嗯不要 视频| 久久久A∨| 色哟哟AⅤ| 黄片视频,下载| 熟妇女伦乱视频视频| 中国少妇XXXX做受| 最新AV在线| 素人美腿视频网站| 国产真实野战在线视频| 亚洲男人天堂网站| 久无码| 囯产操逼片| yw尤物av无码点击进入麻豆| 2019亚洲男人天堂| 人妻少妇久久久| 74成人在线| nuu12国产麻豆精品| 日韩久久三区| 成人三级片无码| 91精品人妻偷情| 91久久伊人婷婷青青草| 97二区四区| 国产懂色精品国产av| 五月丁香激情四射| 日本韩国五十路六十路七十路老熟女作爱视频网站 | 色婷婷国产精品一区在线观看| JULIA人妻风俗店中出电影| 2020中文在线一区二区三区| 男人亚洲天堂| 嗯嗯啊啊操我| 天美传媒av一区二区| 熟妇一区二区三区| 黑操B| 成人综合久久精品色婷婷| 啪啪视频免费在线观看| 91青青草| 日本影视久久免费| 日本韩高清无砖码22o| 9丨久久九九九| 九九九999久久久网站| 啊啊啊啊无码| 久久婷婷成人综合色怡春院| 综合久久99亚洲人妻中文在线| 欧美 青青草| 色色青青久久| 熟女高潮精品一区二区| 天天干18禁| 豆花视频操逼网址| 秋霞曰韩R级| 亚洲成A∨人影院在线欢看| 91精品久久久| 在线无码网站| 国产av强奸美女| 亚洲精品日韩国产欧美| 麻豆久久久久久久久丝袜| 亚洲色图第一页| 在线五区| 欧美色图自拍| 麻豆精品.欧美精品.日韩精品.| 亚洲天天精品| 国产亚洲欧美每日在线| 亚洲AV无码成人精品久久| 91麻豆va国产精品| 极品内射| 国产精品诱惑| 五月天黄色激情视频| 亚洲无码色| 精品乱子一区二区三区99| 亚洲熟女一区| 亚洲熟妇A V黑人| 乱伦AVxx| 人妻密肉在线观看| 中文字幕第2页| 日韩免费看在线黄色片| 992这里有精品| 欧美亚州色的图| 97欧美综合| 狠狠穞A片一區二區三區| 性色av一区二区| 精品成人久久久人人亚洲| 日本影视久久免费| 日本操逼视频不卡直接放| 日韩AV一起草| 97干在线视频| 91九九九逼| 国产精品一级毛片不卡视| 四虎在线观看网站| 六月丁香啪啪啪| 亚洲第一免费视频| 青青草中文字幕| 污污污8888| 激情干在线| 色综合av综合久久| 97国产天堂岛| 99操逼| 顶级丝袜熟女一区二区三区| 99精品国产户外露出| 国产诱惑| 91激情网| 国产成人AV麻豆| 91操操| 亚洲精品国产无码高清| 黄色免费网| 吊色| 麻豆天美制片厂网站视频| 亚洲色诱惑| 日韩免费高清大片在线| 亚洲天天操| 日本国产二线女色| 1204金沙人妻懂旧版免费| 五月天大香蕉| 久久91精品国产9丨久久分亭| 欧美狠狠| av影片在线观看不卡| 操美女人妻| 裸体美女国产免费久久久网站| 欧美一二三级精品在线| 波多野结衣之双飞调教在线播放 | 99色在线| 操人91| 91丨熟女丨丰满熟女| 亚洲欧洲精品视频发布| 性影在线视频| 不卡一区二区日本视频| 夜夜影视四色| 操操吧亚洲乱伦视频| 亚州91| 天天综合,91入口| 玖玖爱一区在线| 自拍丝袜美腿人妻| 伊人久久蜜月| 精品超碰色| 久久久精选| AV中亚| 内射夫妻三片| 93人人操人人| www.色婷婷| 国产白嫩精品久久| 中文欧丝袜诱惑| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 国产精品午夜福利亚洲综合网| 60秒不遮不挡| 欧美性生活男人的天堂| 日韩欧美亚洲一区二区三区影院| 中文字幕奈奈美被公侵犯| 亚洲无码久久久久久久| 91综合在线| 亚洲天堂第一页| 天天超级碰碰碰| 人人澡人人干| 亚洲天堂人妻熟妇视频| 日韩精品99999| 校园春色欧美色图| 91熟女视频网| 激情五月天插| 久草色悠悠在线视频| 色九九久九九| 中日韩免费看男女操逼大全| 亚洲蜜桃V妇女| 怡红院怡春院| 啊啊啊骚| 欧美一区二区三区入口| 精品.99999| 超碰在线1234区| 强奸乱伦亚洲第一页| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 欧亚乱色熟一区二区三四区| 久久天天艹| 啊啊啊轻点在线观看| 欧美久久草熟女| 黄色片,com| 超碰在线第一页| 九九热精品免费视频| 啪啪免费| 久久只有精品| 偷拍99| 狠插 制服 自拍| 日本久久天堂| 国产亚洲精品农村妇女 | 97九色| 精品无码产区一区二| 久久熟女人| 人妻中文字幕日韩电影| 波多野结衣之双飞调教在线播放| 日韩欧美三级| 亚洲日韩久久精品一区| 中日无幕一二三四区| 亚洲Av无码成人精品国产| 亚洲黄色视频在线观看视频| 97碰碰色| 欧美日韩精品久久久久东北老熟妇| 殴美牲| 无遮挡猛进视频免费无限观看| 69XX一中文字幕人妻91| 国产99999| 后入综合久久| 智利AV在线网| 精品久久九| 人人超碰在线观看黄| 欧美制服另类丝袜| 五月丁香啪啪网| 亚洲五码一区二区三区| 亚洲欧美精品国产一区二区| 我要色综合网| 91美女在线| 国产三级中文字幕粉嫩| 无码操逼天堂| 亚洲中文电影| 丝袜综合| 色综合加勒比四四季| 久久久久成人蜜桃精品| 久久精品国产精品亚洲艾通辽熟妇| 久久久久亚洲Aⅴ无码| 日韩欧美成人性爱在线| 久久精品久久九九精品| 日韩欧美午夜一区二区| 天天干天天舔| 超碰精品日韩欧美国产| 精品国产一区探花在线观看| 校园春色亚洲| 99999精品| 97超碰日韩| 好吊色综合| 久久69| 超碰95| 丁香色狠狠色综合久久小说| 久久只有精品| 亚洲色图欧美色图另类图片| 色婷婷一区二区三区久久| 天天日夜干| 密臀国产在线| 欧美综合1性辶| 欧美熟妇精品黑人巨大91| 麻豆一区二区AV天美| 暴力av在线| 中文字幕一区二区无码成人| 国产精品久久泡妞网站| 美女十八禁| 欧美精品庄| 亚洲国产97| 亚洲欧美日韩免费观看| 亚洲成人在线高清| 国产99精品一区二区三区免费| 久久riav中文精品| 日亚韩精品视频二区三| 五月婷婷影院| 日韩AV中文字幕电影| 日本97久久久精品| 婷婷久草一区二区三区| 9久久9综合| 日本欧美色| 久湿久久 | 久久久无码国精品无码三区三区| 奸色色 男人天堂 天天射| 高潮内射在线| 欧美国产一区二区三区麻豆传媒| 97国产伦理| 一本大道青青| 国产无码精品久久久久久| 黄色免费网| 在线观看AV片| 国产精品一二三区福利| 超碰97男人| 亚洲人人夜夜澡人人爽| 伊人久久AV诱惑悠悠| 欧洲黄色网| 大伊香蕉在线视频免费| 国语人妻精彩刺激| 蜜桃久久久久久久久久久久| 青青草中出视频 | 日韩综合成人免费视频| 偷窥自拍A片| 久久国色天香香蕉| 99国内熟女露脸视频| 玖玖久久久| 成 人片 黄色大片| 播播亚洲小说亚洲| 九九无码| 六月婷婷一区二区三区| 91天天综合日韩欧美| 中文字幕精品一区二| 婷婷中文网| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 97精品久久| 97香蕉网| 色婷亚洲五月在线观看| 国产AV人人 夜夜人人澡| 国产91丝袜 在线播放| 免费av高清无码| 五月婷色| 日本操逼视频导航| 超碰97综合网| 男人的天堂com| 热久日综合| 国产精品免费1区2区视频| 日日噜噜夜夜久久亚洲一区二区| 亚洲欧美日韩综合在线尤物| 国产性感骚丝袜在线| 亚洲性爱成人| 羞答答AV中文字| 久久久性爱视频| 久操电影| 大学生美女口爆| 欧美性天天影院| 亚洲乱码精品一区二区| 国产一区二区啪啪视频| 欧美亚洲丝袜美女电影| 久久久三区二区一区| 欧洲人妻视频| 超碰亚洲欧美日韩无| 一级人妻性爱视频| 激情人妻另类| 嗯嗯嗯好爽| 激情网色| 日本506070| 麻豆伊人网| 91九九| 国产精品久久久久无码Av网曝门 | 精品无码不卡视频| 亚洲精品一区中文字幕乱码| 丰满精品人妻少妇久久字幕| 日韩本不卡视频在线观看 | 91东北熟女| 成人七区| 嫩草 我啊~嗯~在线| 日韩免费看在线黄色片| 亚洲少妇激情一区二区三区| 日本在线不卡123| 日本免费一级AAA大片器 | 国产一区二区三区导航| 人妻丝袜一区二区三区在线| 成人网欧美风情| 麻豆啪啪啪视频| a片 xxxx受爽视频| 伊人久久亚洲色欲综合网站 | 成人情色一区二区| 成人亚欧免费视频| 97色伦97色伦国产欧美| 噜噜噜噜天天狠狠| 日韩少妇在线视频| 97网址www| 婷婷色网| 亚洲少妇中文字幕网址| 日本一区视频在线观看| 欧美97爱| 天天综合~91| 久久久青草青青国产亚洲免观精品高清完整版_97久久综合区小说区图片区,国精品 | 国产一区麻豆免费观看| www.狠狠| 久久性视频| 久久久久久国产精品免费网站| 可以免费看黄片的视频| A级片一区| 无码78| 粉嫩av一区二区三区天美传媒 | 青青欧美| 欧美色色人| 色综合99999| 午夜精品99久久久久传媒| 另类图片五月| 亚洲 图片 综合91| 台欧久久精品视频| 九九热免费国产视频婷婷伊人五月 | 亚洲Av噜噜一区二区三区妖精| 日韩一999精品| 高清不卡视频| 日韩中文字幕av在线播放| 亚洲熟女综合| 免费亚洲国产精品久久一区| 91丝袜美腿片| 欧美九九九| 啊啊啊啊啊好多水| 13小男生GAY自慰脱裤子| 国产精品人妻一区二区| 波多野结衣一级视频| 伊人黄色视频免费观看| 大香蕉伊人久久| 盗摄 精品 另类 一区| 肉丝网站91| 亚洲欧美日韩电影网站一区| 亚洲情色综合网| 日本 情色 1区| 日本阿v天堂在线观看| 中国大陆国产高清AⅤ毛片| 96久久精品一二三区色欲| 欧美操逼一二三区| 亚洲美女色图| 97超碰9| 久久亚洲欧美中文字幕国语| 激情综合久久| 日本韩国一本产品小视频日本韩国一本产品久久久产品小视频日本韩国一本产品久 | 日本狂喷奶水在线播放212| 亚洲一区二区三区欧美日韩| 人人爽天天爽| 亚洲情色 自拍| 素人一区二区三区日韩| 色婷婷视频| 99只有精品| jizz啪啪| 99精品视频在线观看| 一二三四视频在线社区中文字幕| 三及片网站| 亚洲无码久久久久久久| 中美日韩毛片| 啊啊啊啊啊啊好多水| 国岛片视频| 精品人妻一区二区乱码一区二区| 欧亚 另类 久| 国产精品ⅴ无码大片在线看.| 色99在线| 久草综合网| 日韩一级片在线看| 欧美久久人妻少妇一区二区| 日韩欧美日韩| 欧美拳交在线播放| 国产馆| 激情五月天综合网| 日本一卡二区在线| 九九色影院| 一本色道久久综合狠狠操| 亚洲九月丁香| 天天综合网合集91| 99在线精品视频| 欧美 亚洲| 亚洲日产专区| 97在线免费观看| 久视频在线观看| 一区在线精品中文字幕| 丝袜内射| 亚洲国产精品99久久久| 97爱b| 国产美女mm131爽爽爽爽| 欧美淫乱视频| 99免费在线视频| 国产精品人妻免费精品| 黄色AV影视| 亚洲**2021在线观看| 18禁久极品美女久久哦哟呀!| 国产中文精品一区二区在线观看| 91色s| 伊人激情| 一本久道在线综合视频| 亚洲精品97久久中文字幕| 色爽爽文学| 国产操伦| 黄色交缠性感爆操91国产精品免费一区二区三区| 四虎影院成年人片| 久久超碰97| 欧洲精品一二三在线| 色综合久久888| 成人av在线播放| 91痴汉| 97超碰天天爱天天爱| 豆花视频操逼网址| 婷婷激情四射| 日韩无码AB| 精品人妻一区二区三区夜夜| 无码国产精品午夜不卡(| 久湿久久| 色综合久| 懂色aV一区二区天美传媒| 蜜臀久久99精品久久久久| 男人天堂久久精品| 国产福利在线视频网站| 亚洲不雅视频1区二区| 久久久性爱视频| 久久九九网| 免费啪啪一级视频| 2019精品国产无码成人| 亚州色综合| 国产精品午夜精品| 香蕉免费一区二区三区不读| 99rre在线精品99re8| 中文字幕啊啊啊在线观看视频| 一二三四视频中文字幕在线看| 热热色中文无码| 久久久天堂| av草草在线电影| 强奸熟女一区二区三区| 欧美色图成人网一区二区 | 亚洲欧洲av影音| 91久久久久久久久18| 情色图区| 一级AAA片一区二区三区| 99日视频在线免费| …中文字幕亚洲乱,97人妻无码费视…| 欧美无圣光在线| 中文字幕55555| 女人妻一区| 亚洲网自拍| 国产又大又粗又色生活片亚洲国产精品成人久久久综合免费 | 久久美国毛片| 97干综合网| 天天天堂影视日韩亚洲91| 欧美色图在线视频少妇| 免费精品AB| 久久久久国色αv免费观看| 国产精品丝袜在线| 操逼操逼操| 欧洲综合无码| 成人八戒网站| www.天天干| 蜜色网色哟哟| 亚洲熟女少妇免费视频| 91n处女在线观看| 91亚洲欧美| 亞洲久久直播| 午夜免费视频1000| 91精品人妻一区二区-全集完整版免费正片国语-B02AV | 制服诱惑亚洲一区二区三区在线观看| 久日综合网| 老鸭窝成人免费毛片视频| 精品人妻一区二区三区日产乱码| 内射老妇BBWX0C0CK| 日本色色色视频| 中文字幕二区日韩天堂| 啊啊啊不要啊啊受不了了视频在线| 少妇特黄一区二区三区| 久热一区二区| A片三级无码| 中文字幕乱碼在线| 伊人麻豆传媒| 婷婷中文网| 伊人久久大香线蕉亚洲五月天,青草青草欧美日本一区二区,欧美日产欧美日产国产 | 热99这里有精品综合久久| 国产成年免费大片黄在线观看| 亚洲天堂无码| 99操| 久久99久久99精品天美传媒棢·纸:. | 99热这里只有精品8| 男人久久精品| 久久亚洲AV无码白度| 人人操人人操人人操人人操人人操人人人11.CM | 中文字幕成人| 亚洲激情深爱文学小说网站| 午夜福利一区二区影院| 国产一区二区三区中文字幕| 日韩丨制服丨中文|在线| 亚洲欧美日韩制服另类| 台欧久久精品视频| 欧美性暴力猛交| 欧美 日韩 国产传媒| 超碰99re| 69国产对白刺激| 久久黄黄黄| 欧美一级A一级a爱片久久| 欧美天天射| 久久老子无码午夜伦不卡| 超碰久久草| 一线黄色免费性爱片| 有码色中文字幕在线观看| 91精品人| 福利风月五月天影院| 欧美亚洲图片| 久久久影院| 亚洲 无码 偷拍| 男人天堂久久日韩| 国产丝袜美女在线一区| 欧美激情综合| 人人妻人人色一区二区三区| 欧美成人黄网色网站| 九久久精品| 免费黄色视频网址| 蜜臀AV午夜精品久| 亚洲综合113页| 亚洲精品一区二区精品| 欧美 亚洲 综合 制服 另类| 国产欧美一级在线观看| 欧美第五页| 欧美美女自慰一区二区三区| 立川理惠被中出无码| 屁股久久久久久久久| 亚洲aV无码成人在线观看| 欧美色图 色综合图| 日日干夜夜操视频h| 强奸乱伦大香蕉| 天天综合网在线91| 亚洲AO在线| 亚洲中文字幕精品久久久久久直播| 校园春色五月天| 国产午夜视频| 人妻AV在线| 国产毛片久久久久久久| 97se亚洲| 精品久久久久黄少妇| 97最新在线播放视频| 久久精品人人做人人看| 人妖欧美一区二区| 婷婷美人网| 国产做?爰片久久毛片?片美国| 妇女性内射冈站HDWWWCOM| 日日骚av| 91精产一区二区三区| 久久婷婷五月天| www.人人cao| 中国国产精品一区视频| 老熟妇乱轮| 欧美综合色,www| 热热色国产一二区AV| 成人色女网| 天天综和| 嗯嗯嗯不要不要免费视频| 久草大| 国产成人精品日本视频| 国产乱伦性爱区| 国产毛片片精品天天看视频| 狠狠爱夜夜| 97人妻人人躁人人玩人人| 亚洲一本色码中文字幕| 人人喜人人妻| 67194无码不卡| 婷婷五月天久久精品视频一区二区三区 | 一区二区三区在线资源| 爱我干综合| 九九99久久| 9久热| 亚洲麻豆精品二区三区| 天美精品av| 97激情97激情| 国产地址二三| 内射中国少妇高清视频免费视频| 日韩资源网| 亚洲日韩熟女人妻高清在线| 国产熟女精品区| 色老汉色| 性性久久| 日本不卡中文| 成人日本片久久久蜜桃| 91美女视频| 国产二区三区免费视频| ,成人免费啪啪视频| 韩国午夜理伦三级好看| 一区二区三区四区免费视频| 这里都是精品在线观看| 亚洲欧美大| 国产成人主播| 哑洲在线| 热思思免费视频| 乱论91| 91无人区卡一卡二卡三乱码入口最新版:能让用户有更多选择的选择-经典说说-爱 | 国产精品农村妇女| 免费视频在线一区二区不卡| 51一区二区三区| 青青草密桃在线播放| 美女的肌被草喷水视频| 激情亚洲天堂| 成人黄页| 国产深喉视频一区二区| 岛国激情视频软件| 91精品91久久久中77777| 久久免费精品96| 日韩一卡二卡三卡| 97人人操人人摸| 青青草在线成人视频| 欧美96交| 波多野结衣一级视频| 操操AV电影| 不卡六六在线91| 亚洲阿v天堂无码z2018| 囯产操逼片| 超碰天天操| 国产女同在线观看视频| 91在线页| 亚洲精品电影| 岛国精品视频在线观看| 久久色一区| 激情小说图片亚洲首页| 亚洲男人天堂2019| 天综合网欧美| 亚洲av综合色区无码一| 欧美亚洲AN| 以及麻豆国产入口在线观看免费| 亚州情色j区| 亚州综合色| 精品少妇后入一区二区三区四区人妻巨乳 | 欧美操逼视频二区| 另类天堂| ,国产乱人伦精品一区二区三区| 97久久久网站| 大香蕉伊人色偷偷在线| 啊啊啊轻点在线观看| 欧美人妻精品一区二区| 精品人妻视频一区二区在线播放| 成人a大片在线观看| 精品99999久久久久久| 翔田千里AV无码秘 三区| 91原创在线观看| 综合久久少妇中文字幕| 欧美中文字幕一区| 综合久久久久久久久91| 人人手机欧洲亚洲国产人妻| 国产v亚洲v日韩v欧美v片另类| 人妻天天爽夜夜爽爽| 欧美色另类| 91美乳| 国产理论视频在线播放| 欧美精品欧美精品系列| 97人人超| 亚洲欧美色图小说| 亚洲电影91| 长长久久免费视频| 亚州性色| 国产精品天干天干综合网麻豆| 国产女人操逼视频| 淫淫综合网| 久草资源欧美在线视频| 日日碰狠狠添天天爽超| 蜜臀久久99精品久久久久久酒店 | 超碰97欧美在线| 日韩黄色av中文字幕| www.91欧美| 丁香五月偷拍| 天天弄天天操| 九九九九九精品视频| 69人妻精品丰满熟女区| av影片在线观看不卡| 九九九九九九九| 久久久久久中文字幕中文字幕最新| 欧美亚洲天天| 蜜臀久久99精品久久综合| 亚洲一区二区久久久久| 中日韓欧美高清| 亚洲。天堂。日本在线观看| 91中文精品日韩欧美在线| 五月婷婷AV| 婷婷视频在线免费观看| 欧州一区二区三区四区| 91精品久久久久| 操淫穴亚洲五月丁香 | 神马久久久久眼| 人妻内射一区二区在线视频| 国产真实野战在线视频| 国产传媒日韩| 96国产精品| 91强在线播放| 免费视频无码| 精品国产久热在线观看| 人妻 丝袜美腿 中文字幕| 国产夫妻性生活视频| ...日韩成人一区二区三区字幕| 日韩专区数据列表-第3230页-精品国产一区二区三区香蕉 久久99熟女人妻中文字 | 强奸乱伦av电影| 无码日韩人妻av一| 可以在线观看的黄色网址| 久操操AV电影| 天天弄天天操| 精品国产丝袜一区二区三区乱码| 天堂种子在线www网资源| 成年女人黄网站| 立川理惠被中出无码| 婷婷激情丁香| 色噜噜人妻丝袜a∨先锋影| 2017天天插| 特级大荫道BBwBBwBBW| 成人免费毛片| 黄片免费日韩| 男女激烈网站最新| av爱爱爱| 亚洲巨爆乳一区二区三区四季网| 丝袜美腿av女优在线| 超碰午夜| a亚洲欧美色欲| 中文字幕日韩精品久久| 青娱乐久久艹| 丁香五月色情| 欧亚免费视频| 五月婷婷影院| 97超碰免费人人性爱| 岛国天天午夜影院传媒网| 国产农村妇女毛片精品久久| 女优大全 - 91n| 色操逼网| 五月婷婷六月色| 亚一综合久久久久久久久久| 亚洲1区| 日韩激情视频| 亚洲美腿丝袜香蕉影视欧美成人| 玖玖爱伊人玖玖爱| 少好三P| 丁香九月 婷婷| 波多野结衣先锋影音| 这里有精品| 人妻精品一区一区三区蜜桃91| 国产精品点击进入在线影院高清 | 深夜国产一区二区三区在线看| 99久久久久| 日韩精品9999| 日韩91网| 丁香九月激情啪| 中文字幕黑人大片| 蜜桃久久久久久久久久久久| 91熟女视频| 91精品久久久久久综合五月天| 东京热不卡视频| 久草在线| 天天操夜夜操| 欧美—性—交—色| 五月天婷精品激情| 亚洲限制级| 青青操国产夫妻| 中文字幕jul-617人妻熟女| 成熟熟女国产精品一区二区| 99999国产精品| 成功精品影院| 美女91AV| 97国产超湿| 无码精品久久久久久亚洲| 日本欧美韩国日产片片在线看免| 清纯唯美综合|