亚洲有码Av一区二区三区_国产高清啪啪免费视频_69色视频国产_国产成人人人爆出白浆_国产精品自在线拍国_一本久久伊人热热精品无码_午夜性刺激在线看免费带字幕_助力高品质欧美狂喷水_亚洲精品日韩无码_精品无码一区二区三区蜜臀_麻豆高清国产AV_熟妇人素无码中文字幕_亚洲a级片在线观看_国产欧美日韩三区_99国产成人高清在线观看

ARTICLE DETAIL

資訊詳情

深耕商務(wù)建站與企業(yè)官網(wǎng)運(yùn)營(yíng)的一線實(shí)戰(zhàn)洞察。

Agent工具調(diào)用權(quán)限控制:從失控案例到分層防護(hù)實(shí)戰(zhàn)

Agent工具調(diào)用權(quán)限控制:從失控案例到分層防護(hù)實(shí)戰(zhàn) 1. Agent 權(quán)限控制的核心命題為什么工具調(diào)用會(huì)失控1.1 從一次真實(shí)的翻車現(xiàn)場(chǎng)說(shuō)起去年年底我?guī)鸵粋€(gè)團(tuán)隊(duì)做代碼審查他們的 Agent 系統(tǒng)在測(cè)試環(huán)境跑得好好的上線第二天就出了事。事情本身不復(fù)雜一個(gè)負(fù)責(zé)運(yùn)維巡檢的 Agent被要求“檢查磁盤使用率超過(guò)閾值就清理臨時(shí)文件”。結(jié)果這個(gè) Agent 在調(diào)用清理工具時(shí)把參數(shù)里的路徑從/tmp/拼成了/而工具層沒有任何二次校驗(yàn)直接執(zhí)行了刪除操作。萬(wàn)幸的是那臺(tái)機(jī)器是測(cè)試機(jī)數(shù)據(jù)有備份。這件事讓我徹底意識(shí)到一個(gè)問(wèn)題Agent 的能力上限取決于它被允許做什么而不是它能做什么。工具調(diào)用是 Agent 的手和腳權(quán)限控制就是給這雙手腳劃定活動(dòng)范圍。沒有邊界的 Agent本質(zhì)上就是一個(gè)拿著管理員密鑰的實(shí)習(xí)生你永遠(yuǎn)不知道它下一秒會(huì)點(diǎn)哪個(gè)按鈕。這篇文章想聊的就是這件事Agent 的權(quán)限控制到底該怎么做才能既讓工具調(diào)用順暢又不至于失控。我會(huì)從架構(gòu)設(shè)計(jì)、認(rèn)證授權(quán)、工具層校驗(yàn)、運(yùn)行時(shí)監(jiān)控幾個(gè)維度展開把踩過(guò)的坑和驗(yàn)證過(guò)的方案都攤開講。適合正在做 Agent 開發(fā)、準(zhǔn)備把 Agent 推向生產(chǎn)環(huán)境的同學(xué)參考也適合對(duì) AI Agent 安全邊界感興趣的技術(shù)管理者。1.2 工具調(diào)用失控的三種典型形態(tài)在展開方案之前先把“失控”這個(gè)詞拆開看。根據(jù)我接觸過(guò)的案例工具調(diào)用失控基本逃不出三種形態(tài)。第一種是越權(quán)調(diào)用。Agent 調(diào)用了它本不該調(diào)用的工具。比如一個(gè)只負(fù)責(zé)客服問(wèn)答的 Agent理論上只能調(diào)用知識(shí)庫(kù)檢索和工單創(chuàng)建兩個(gè)工具但因?yàn)楣ぞ咦?cè)表沒有做隔離它意外拿到了數(shù)據(jù)庫(kù)刪除工具的調(diào)用權(quán)限。這種情況在 Agent 框架早期很常見很多框架默認(rèn)把所有注冊(cè)的工具都暴露給所有 Agent。第二種是參數(shù)污染。Agent 調(diào)用了正確的工具但傳入了危險(xiǎn)的參數(shù)。上面那個(gè)刪除臨時(shí)文件的例子就是典型。Agent 本身沒有惡意它只是對(duì)自然語(yǔ)言的理解出現(xiàn)了偏差把“清理臨時(shí)文件”理解成了“清理文件”。參數(shù)污染是最難防的一類因?yàn)楣ぞ弑旧硎呛戏ǖ膯?wèn)題出在輸入上。第三種是調(diào)用鏈?zhǔn)Э亍蝹€(gè)工具調(diào)用都沒問(wèn)題但多個(gè)調(diào)用串起來(lái)就出了問(wèn)題。比如 Agent 先調(diào)用“讀取配置文件”拿到數(shù)據(jù)庫(kù)連接串再調(diào)用“執(zhí)行 SQL”把數(shù)據(jù)導(dǎo)出來(lái)最后調(diào)用“發(fā)送郵件”把數(shù)據(jù)發(fā)到外部地址。每一步單獨(dú)看都合規(guī)但組合起來(lái)就是一次數(shù)據(jù)泄露。這種形態(tài)最隱蔽也最考驗(yàn)權(quán)限系統(tǒng)的設(shè)計(jì)深度。理解了這三種形態(tài)后面的方案設(shè)計(jì)就有了靶子。權(quán)限控制不是簡(jiǎn)單地加個(gè)開關(guān)而是要針對(duì)不同形態(tài)分別設(shè)防。2. 權(quán)限模型選型RBAC、ABAC 還是能力令牌2.1 三種主流模型的適用場(chǎng)景對(duì)比給 Agent 做權(quán)限控制繞不開權(quán)限模型的選擇。業(yè)界常用的有三種RBAC基于角色的訪問(wèn)控制、ABAC基于屬性的訪問(wèn)控制、以及能力令牌Capability Token模式。這三種不是互斥的實(shí)際項(xiàng)目中往往是組合使用但理解各自的適用場(chǎng)景很重要。模型核心思想優(yōu)勢(shì)劣勢(shì)適合場(chǎng)景RBAC按角色分配權(quán)限簡(jiǎn)單直觀易管理粒度粗難應(yīng)對(duì)動(dòng)態(tài)場(chǎng)景Agent 數(shù)量少、角色固定的系統(tǒng)ABAC按屬性動(dòng)態(tài)判斷粒度細(xì)靈活規(guī)則復(fù)雜性能開銷大多租戶、動(dòng)態(tài)環(huán)境能力令牌令牌即權(quán)限最小權(quán)限天然隔離令牌管理復(fù)雜高安全要求的工具調(diào)用RBAC 的思路是給 Agent 分配角色角色綁定權(quán)限。比如“客服 Agent”角色只能調(diào)用知識(shí)庫(kù)和工單工具“運(yùn)維 Agent”角色可以調(diào)用監(jiān)控和重啟工具。這種模型的好處是管理簡(jiǎn)單新增一個(gè) Agent 只需要分配角色。壞處是粒度太粗同一個(gè)角色下的所有 Agent 權(quán)限完全一樣沒法做細(xì)粒度區(qū)分。ABAC 的思路是根據(jù)屬性動(dòng)態(tài)判斷。屬性可以包括 Agent 的身份、調(diào)用的工具、傳入的參數(shù)、當(dāng)前時(shí)間、請(qǐng)求來(lái)源 IP 等等。比如規(guī)則可以寫成“只有當(dāng) Agent 屬于運(yùn)維組、調(diào)用的工具是重啟服務(wù)、且目標(biāo)服務(wù)在預(yù)定義白名單內(nèi)時(shí)才允許調(diào)用”。這種模型靈活度極高但規(guī)則一多就難以維護(hù)而且每次調(diào)用都要做規(guī)則匹配性能是個(gè)問(wèn)題。能力令牌的思路是權(quán)限隨令牌走。Agent 在調(diào)用工具前先向授權(quán)中心申請(qǐng)一個(gè)令牌令牌里明確寫了“允許調(diào)用哪個(gè)工具、允許傳什么參數(shù)、有效期多久”。工具層拿到令牌后校驗(yàn)校驗(yàn)通過(guò)才執(zhí)行。這種模型天然符合最小權(quán)限原則因?yàn)榱钆剖桥R時(shí)的、限定范圍的。缺點(diǎn)是令牌的申請(qǐng)和校驗(yàn)增加了調(diào)用鏈路需要額外的基礎(chǔ)設(shè)施支撐。2.2 我的選型建議分層組合實(shí)際項(xiàng)目中我傾向于分層組合用 RBAC 做粗粒度隔離用能力令牌做細(xì)粒度控制ABAC 用在特殊場(chǎng)景的動(dòng)態(tài)判斷上。具體來(lái)說(shuō)第一層用 RBAC 把 Agent 按職能分組每組只能看到自己組內(nèi)的工具注冊(cè)表。這一層解決的是“越權(quán)調(diào)用”問(wèn)題讓客服 Agent 根本看不到數(shù)據(jù)庫(kù)工具的存在。第二層用能力令牌控制單次調(diào)用的參數(shù)范圍Agent 調(diào)用工具前必須申請(qǐng)令牌令牌里限定了參數(shù)的白名單或正則約束。這一層解決的是“參數(shù)污染”問(wèn)題。第三層用 ABAC 處理跨工具的調(diào)用鏈比如檢測(cè)到短時(shí)間內(nèi)連續(xù)調(diào)用“讀取敏感數(shù)據(jù)”和“對(duì)外發(fā)送”兩類工具時(shí)觸發(fā)人工審核或直接阻斷。這一層解決的是“調(diào)用鏈?zhǔn)Э亍眴?wèn)題。這個(gè)分層方案不是拍腦袋想的而是從實(shí)際故障中倒推出來(lái)的。每一層對(duì)應(yīng)一類失控形態(tài)職責(zé)清晰互不干擾。下面幾章我會(huì)把每一層的實(shí)現(xiàn)細(xì)節(jié)展開講。3. 認(rèn)證與授權(quán)把好工具調(diào)用的第一道門3.1 Agent 身份認(rèn)證的三種方式權(quán)限控制的前提是身份認(rèn)證。你得先確認(rèn)“你是誰(shuí)”才能判斷“你能做什么”。Agent 的身份認(rèn)證和傳統(tǒng)用戶認(rèn)證有相似之處但也有特殊性Agent 是程序沒有交互界面認(rèn)證過(guò)程必須自動(dòng)化。目前主流的 Agent 身份認(rèn)證方式有三種。第一種是靜態(tài)密鑰每個(gè) Agent 分配一個(gè) API Key調(diào)用工具時(shí)帶上。這種方式實(shí)現(xiàn)簡(jiǎn)單但密鑰一旦泄露就是災(zāi)難而且密鑰輪換麻煩。第二種是雙向 TLS 證書Agent 和工具服務(wù)各自持有證書通信時(shí)互相驗(yàn)證。這種方式安全性高但證書管理成本大適合內(nèi)部服務(wù)間調(diào)用。第三種是短期令牌Agent 通過(guò)身份憑證向授權(quán)中心換取短期令牌令牌有效期通常幾分鐘到幾小時(shí)。這種方式兼顧了安全性和靈活性是我最推薦的做法。短期令牌的具體流程是這樣的Agent 啟動(dòng)時(shí)用預(yù)置的身份憑證比如一個(gè)長(zhǎng)期有效的簽名密鑰向授權(quán)中心發(fā)起認(rèn)證請(qǐng)求。授權(quán)中心驗(yàn)證憑證后簽發(fā)一個(gè)短期令牌令牌里包含 Agent 的身份標(biāo)識(shí)、可調(diào)用的工具列表、有效期。Agent 后續(xù)調(diào)用工具時(shí)都帶上這個(gè)令牌工具層校驗(yàn)令牌的有效性和權(quán)限范圍。令牌過(guò)期后Agent 重新申請(qǐng)。這個(gè)流程的好處是即使令牌被截獲攻擊窗口也只有幾分鐘。而且授權(quán)中心可以隨時(shí)吊銷令牌實(shí)現(xiàn)即時(shí)權(quán)限回收。3.2 工具側(cè)的授權(quán)校驗(yàn)邏輯認(rèn)證解決了“你是誰(shuí)”授權(quán)解決“你能做什么”。工具側(cè)的授權(quán)校驗(yàn)我建議做成一個(gè)獨(dú)立的中間件所有工具調(diào)用都必須經(jīng)過(guò)它。這個(gè)中間件的校驗(yàn)邏輯分三步。第一步是令牌有效性校驗(yàn)。檢查令牌是否過(guò)期、簽名是否合法、是否在吊銷列表中。這一步是基礎(chǔ)不通過(guò)直接拒絕。第二步是工具權(quán)限校驗(yàn)。檢查令牌里聲明的可調(diào)用工具列表是否包含當(dāng)前被調(diào)用的工具。這一步解決越權(quán)調(diào)用問(wèn)題。這里有個(gè)細(xì)節(jié)工具列表建議用精確匹配不要用通配符。我見過(guò)有團(tuán)隊(duì)為了省事寫成db.*結(jié)果 Agent 能調(diào)用所有數(shù)據(jù)庫(kù)相關(guān)工具包括刪除表的。精確匹配雖然配置麻煩點(diǎn)但安全邊界清晰。第三步是參數(shù)范圍校驗(yàn)。檢查傳入的參數(shù)是否在令牌聲明的范圍內(nèi)。這一步解決參數(shù)污染問(wèn)題。參數(shù)校驗(yàn)的規(guī)則可以靈活設(shè)計(jì)比如路徑參數(shù)必須以某個(gè)前綴開頭、SQL 參數(shù)必須是 SELECT 語(yǔ)句、數(shù)值參數(shù)必須在某個(gè)區(qū)間內(nèi)。校驗(yàn)規(guī)則建議寫在工具的定義里和工具代碼放在一起這樣新增工具時(shí)不容易漏掉。注意參數(shù)校驗(yàn)不要只做字符串匹配要考慮編碼繞過(guò)。比如路徑參數(shù)../../etc/passwd這種單純匹配前綴是攔不住的需要做路徑規(guī)范化后再校驗(yàn)。3.3 授權(quán)管理的工程實(shí)踐授權(quán)管理本身也是個(gè)工程問(wèn)題。我見過(guò)不少團(tuán)隊(duì)權(quán)限配置散落在各個(gè)工具代碼里改一個(gè)權(quán)限要翻十幾個(gè)文件最后沒人敢改權(quán)限就越積越大。我的做法是把權(quán)限配置集中管理。建一個(gè)獨(dú)立的權(quán)限配置文件或權(quán)限服務(wù)所有工具的可調(diào)用角色、參數(shù)約束、調(diào)用頻率限制都寫在這里。工具代碼啟動(dòng)時(shí)從權(quán)限服務(wù)拉取配置運(yùn)行時(shí)按配置校驗(yàn)。這樣改權(quán)限只需要改一處而且可以做版本管理和審計(jì)。權(quán)限配置的格式我推薦用結(jié)構(gòu)化數(shù)據(jù)比如 YAML 或 JSON。下面是一個(gè)示例展示了一個(gè)數(shù)據(jù)庫(kù)查詢工具的權(quán)限配置tool: db_query allowed_roles: - data_analyst - ops_engineer param_constraints: sql: type: string pattern: ^SELECT\\s.*$ max_length: 2000 timeout: type: integer min: 1 max: 30 rate_limit: max_calls_per_minute: 10 max_calls_per_hour: 100這個(gè)配置里allowed_roles限定了哪些角色可以調(diào)用param_constraints限定了 SQL 必須以 SELECT 開頭且長(zhǎng)度不超過(guò) 2000rate_limit限定了調(diào)用頻率。工具層拿到這個(gè)配置后逐項(xiàng)校驗(yàn)即可。集中管理還有個(gè)好處是方便做審計(jì)。所有權(quán)限變更都有記錄出了問(wèn)題可以追溯。我建議權(quán)限配置的每次修改都走代碼審查流程不要允許直接在生產(chǎn)環(huán)境改配置。4. 工具層防護(hù)在離危險(xiǎn)最近的地方設(shè)卡4.1 工具注冊(cè)表的隔離設(shè)計(jì)工具注冊(cè)表是 Agent 獲取可用工具列表的地方。很多 Agent 框架默認(rèn)把所有注冊(cè)的工具暴露給所有 Agent這是越權(quán)調(diào)用的根源。正確的做法是按 Agent 身份隔離工具注冊(cè)表。具體實(shí)現(xiàn)上工具注冊(cè)表應(yīng)該支持按角色或按 Agent ID 過(guò)濾。Agent 啟動(dòng)時(shí)帶著自己的身份憑證向注冊(cè)表請(qǐng)求工具列表注冊(cè)表根據(jù)身份返回對(duì)應(yīng)的工具子集。這樣客服 Agent 拿到的列表里根本沒有數(shù)據(jù)庫(kù)工具它連調(diào)用的機(jī)會(huì)都沒有。這里有個(gè)容易忽略的點(diǎn)工具列表的過(guò)濾要在服務(wù)端做不能在客戶端做。我見過(guò)有團(tuán)隊(duì)在 Agent 端過(guò)濾結(jié)果 Agent 被篡改后直接請(qǐng)求全量列表過(guò)濾形同虛設(shè)。服務(wù)端過(guò)濾才是可靠的。另外工具注冊(cè)表本身也要做認(rèn)證。不是誰(shuí)都能請(qǐng)求工具列表的必須持有有效的身份憑證。這一步和上一章的認(rèn)證機(jī)制打通形成閉環(huán)。4.2 參數(shù)校驗(yàn)的實(shí)戰(zhàn)技巧參數(shù)校驗(yàn)是防參數(shù)污染的核心。前面說(shuō)了要在工具定義里寫校驗(yàn)規(guī)則這里展開講幾個(gè)實(shí)戰(zhàn)技巧。路徑參數(shù)一定要做規(guī)范化。用戶傳入的路徑可能是相對(duì)路徑、可能包含..、可能是符號(hào)鏈接。校驗(yàn)前先用realpath之類的函數(shù)規(guī)范化再檢查是否在允許的目錄下。我一般會(huì)要求路徑必須以某個(gè)絕對(duì)路徑開頭且規(guī)范化后不能跳出這個(gè)前綴。SQL 參數(shù)建議用白名單而非黑名單。黑名單比如禁止 DELETE、DROP很容易被繞過(guò)比如用注釋、大小寫混寫、編碼等方式。白名單只允許 SELECT更可靠。如果業(yè)務(wù)確實(shí)需要寫操作建議拆成獨(dú)立的工具單獨(dú)授權(quán)。數(shù)值參數(shù)要檢查邊界。我見過(guò)一個(gè) Agent 調(diào)用“設(shè)置超時(shí)時(shí)間”工具時(shí)傳了999999999導(dǎo)致服務(wù)線程被長(zhǎng)時(shí)間占用。數(shù)值參數(shù)一定要設(shè)上下界超出范圍直接拒絕。字符串參數(shù)要限制長(zhǎng)度。超長(zhǎng)字符串可能導(dǎo)致緩沖區(qū)溢出或性能問(wèn)題。一般建議限制在合理范圍內(nèi)比如 2000 字符。枚舉參數(shù)要嚴(yán)格匹配。如果參數(shù)是枚舉類型校驗(yàn)時(shí)必須精確匹配不要做模糊匹配。比如action參數(shù)只允許start、stop、restart那就不能接受Start或start帶空格。這些技巧看起來(lái)瑣碎但每一條都是從實(shí)際故障中總結(jié)出來(lái)的。參數(shù)校驗(yàn)做扎實(shí)了能擋掉大部分參數(shù)污染問(wèn)題。4.3 調(diào)用頻率與并發(fā)控制除了單次調(diào)用的校驗(yàn)還要控制調(diào)用的頻率和并發(fā)。Agent 有可能因?yàn)檫壿嬪e(cuò)誤陷入循環(huán)短時(shí)間內(nèi)發(fā)起大量調(diào)用把下游服務(wù)打掛。頻率控制我建議做兩級(jí)單 Agent 級(jí)和工具級(jí)。單 Agent 級(jí)限制每個(gè) Agent 每分鐘、每小時(shí)的調(diào)用總數(shù)防止單個(gè) Agent 失控。工具級(jí)限制每個(gè)工具被調(diào)用的總頻率防止所有 Agent 一起把某個(gè)工具打掛。并發(fā)控制則是限制同時(shí)進(jìn)行的調(diào)用數(shù)。比如數(shù)據(jù)庫(kù)查詢工具同時(shí)最多允許 5 個(gè)并發(fā)調(diào)用超出的排隊(duì)等待。這樣可以避免 Agent 并發(fā)調(diào)用把數(shù)據(jù)庫(kù)連接池耗盡。實(shí)現(xiàn)上頻率控制可以用令牌桶算法并發(fā)控制可以用信號(hào)量。這些在工具層的中間件里實(shí)現(xiàn)即可不需要 Agent 端配合。提示頻率限制的閾值不要設(shè)得太死要留出合理的突發(fā)空間。我一般會(huì)設(shè)一個(gè)基礎(chǔ)速率加一個(gè)突發(fā)上限比如基礎(chǔ) 10 次/分鐘突發(fā)上限 30 次。這樣正常業(yè)務(wù)不受影響異常情況也能兜住。5. 運(yùn)行時(shí)監(jiān)控讓失控在發(fā)生前被攔截5.1 調(diào)用鏈追蹤與異常檢測(cè)前面幾層都是事前的防護(hù)運(yùn)行時(shí)監(jiān)控是事中攔截。Agent 的調(diào)用行為是動(dòng)態(tài)的靜態(tài)規(guī)則不可能覆蓋所有情況需要運(yùn)行時(shí)監(jiān)控來(lái)兜底。調(diào)用鏈追蹤是基礎(chǔ)。每次工具調(diào)用都要記錄誰(shuí)調(diào)的、調(diào)了什么、傳了什么參數(shù)、返回了什么、耗時(shí)多久。這些記錄匯總起來(lái)就能看出 Agent 的行為模式。正常模式下Agent 的調(diào)用是有規(guī)律的比如客服 Agent 大部分時(shí)間在調(diào)知識(shí)庫(kù)檢索。如果突然開始調(diào)工單刪除工具那就是異常。異常檢測(cè)可以基于規(guī)則也可以基于統(tǒng)計(jì)。基于規(guī)則的比如“短時(shí)間內(nèi)連續(xù)調(diào)用敏感工具超過(guò) N 次”基于統(tǒng)計(jì)的比如“當(dāng)前調(diào)用頻率偏離歷史均值超過(guò) 3 個(gè)標(biāo)準(zhǔn)差”。我建議先用規(guī)則規(guī)則覆蓋不了的再用統(tǒng)計(jì)。規(guī)則的好處是解釋性強(qiáng)出了問(wèn)題知道為什么被攔。5.2 敏感操作的二次確認(rèn)機(jī)制有些操作風(fēng)險(xiǎn)太高即使權(quán)限校驗(yàn)通過(guò)了也建議加一道二次確認(rèn)。比如刪除數(shù)據(jù)、修改配置、對(duì)外發(fā)送數(shù)據(jù)這類操作。二次確認(rèn)的實(shí)現(xiàn)方式有兩種。一種是同步確認(rèn)Agent 發(fā)起調(diào)用后系統(tǒng)暫停執(zhí)行通知人工審核審核通過(guò)才繼續(xù)。這種方式安全但慢適合低頻高風(fēng)險(xiǎn)的場(chǎng)景。另一種是異步確認(rèn)Agent 發(fā)起調(diào)用后立即返回“待審核”實(shí)際執(zhí)行在審核通過(guò)后進(jìn)行。這種方式不阻塞 Agent但需要 Agent 能處理異步結(jié)果。我一般建議對(duì)“刪除”和“對(duì)外發(fā)送”兩類操作強(qiáng)制二次確認(rèn)。刪除操作不可逆對(duì)外發(fā)送可能導(dǎo)致數(shù)據(jù)泄露這兩類值得多花點(diǎn)時(shí)間確認(rèn)。二次確認(rèn)的通知渠道可以靈活選擇郵件、即時(shí)通訊工具、工單系統(tǒng)都行。關(guān)鍵是確認(rèn)人要能看到完整的調(diào)用上下文誰(shuí)調(diào)的、調(diào)什么、參數(shù)是什么、為什么觸發(fā)確認(rèn)。信息不全的確認(rèn)請(qǐng)求審核人只能盲批失去了確認(rèn)的意義。5.3 熔斷與降級(jí)策略當(dāng)監(jiān)控發(fā)現(xiàn)異常時(shí)系統(tǒng)需要有自動(dòng)處置能力。熔斷和降級(jí)是兩個(gè)常用手段。熔斷是指當(dāng)某個(gè) Agent 或某個(gè)工具的異常率達(dá)到閾值時(shí)自動(dòng)切斷其調(diào)用。比如某個(gè) Agent 連續(xù) 5 次調(diào)用失敗就暫時(shí)禁止它調(diào)用任何工具等人工介入排查。熔斷的好處是防止異常擴(kuò)散避免一個(gè) Agent 的問(wèn)題拖垮整個(gè)系統(tǒng)。降級(jí)是指當(dāng)系統(tǒng)壓力過(guò)大時(shí)主動(dòng)關(guān)閉非核心功能保住核心功能。比如當(dāng)工具調(diào)用隊(duì)列積壓超過(guò)閾值時(shí)暫停所有非關(guān)鍵工具的調(diào)用只保留核心工具。降級(jí)的好處是保證系統(tǒng)在極端情況下仍能提供基本服務(wù)。熔斷和降級(jí)的閾值需要根據(jù)實(shí)際業(yè)務(wù)調(diào)整。我建議先設(shè)一個(gè)保守的閾值觀察一段時(shí)間后再優(yōu)化。閾值太松起不到保護(hù)作用太緊會(huì)誤傷正常業(yè)務(wù)。6. 常見問(wèn)題與排查技巧實(shí)錄6.1 權(quán)限配置的常見坑做 Agent 權(quán)限控制這些年踩過(guò)的坑不少挑幾個(gè)典型的說(shuō)說(shuō)??右粰?quán)限繼承導(dǎo)致的越權(quán)。有些系統(tǒng)支持角色繼承比如“高級(jí)客服”繼承“客服”的所有權(quán)限。這本身沒問(wèn)題但如果繼承鏈沒管好可能出現(xiàn)“高級(jí)客服”意外繼承了“管理員”的權(quán)限。我的建議是繼承鏈不要超過(guò)兩層且每次新增繼承關(guān)系都要審查。坑二默認(rèn)權(quán)限過(guò)大。很多框架的默認(rèn)權(quán)限是“允許所有”新增工具時(shí)如果不顯式配置權(quán)限就默認(rèn)對(duì)所有 Agent 開放。這是很危險(xiǎn)的。我的做法是把默認(rèn)權(quán)限設(shè)為“拒絕所有”新增工具必須顯式配置允許哪些角色調(diào)用。這樣雖然麻煩點(diǎn)但安全??尤龣?quán)限回收不及時(shí)。Agent 下線了但它的權(quán)限沒回收令牌還在有效期內(nèi)。如果令牌被截獲就能繼續(xù)調(diào)用。我的做法是 Agent 下線時(shí)主動(dòng)吊銷其所有令牌且令牌有效期設(shè)短一點(diǎn)比如 15 分鐘??铀臏y(cè)試環(huán)境權(quán)限和生產(chǎn)環(huán)境混用。測(cè)試環(huán)境的 Agent 權(quán)限往往配得很松方便調(diào)試。如果測(cè)試環(huán)境的憑證泄露攻擊者可能用它去調(diào)生產(chǎn)環(huán)境的工具。我的做法是測(cè)試環(huán)境和生產(chǎn)環(huán)境的授權(quán)中心完全隔離憑證不通用。6.2 排查工具調(diào)用問(wèn)題的思路當(dāng)工具調(diào)用出問(wèn)題時(shí)怎么快速定位我一般按這個(gè)順序排查。第一步看調(diào)用日志。日志里應(yīng)該有完整的調(diào)用記錄時(shí)間、Agent ID、工具名、參數(shù)、返回值、耗時(shí)。先確認(rèn)調(diào)用是否真的發(fā)生了參數(shù)是什么。第二步看權(quán)限校驗(yàn)日志。如果調(diào)用被拒絕了權(quán)限校驗(yàn)日志里會(huì)有原因是令牌過(guò)期、還是工具不在允許列表、還是參數(shù)校驗(yàn)失敗。根據(jù)原因定位問(wèn)題。第三步看 Agent 的決策日志。如果調(diào)用發(fā)生了但結(jié)果不對(duì)可能是 Agent 的決策有問(wèn)題。看 Agent 為什么選擇這個(gè)工具、為什么傳這個(gè)參數(shù)。這一步往往能發(fā)現(xiàn) Agent 的邏輯缺陷。第四步看下游服務(wù)日志。如果工具執(zhí)行了但結(jié)果異常可能是下游服務(wù)的問(wèn)題??聪掠畏?wù)收到了什么請(qǐng)求、處理結(jié)果如何。這個(gè)排查順序從外到內(nèi)逐步縮小范圍。大部分問(wèn)題在前兩步就能定位。6.3 常見問(wèn)題速查表問(wèn)題現(xiàn)象可能原因排查方向解決方案調(diào)用被拒絕提示無(wú)權(quán)限令牌不含該工具權(quán)限檢查令牌的工具列表調(diào)整角色權(quán)限配置調(diào)用被拒絕提示參數(shù)非法參數(shù)校驗(yàn)不通過(guò)檢查參數(shù)校驗(yàn)規(guī)則和實(shí)際參數(shù)修正 Agent 傳參或放寬規(guī)則調(diào)用成功但結(jié)果異常Agent 決策錯(cuò)誤或下游問(wèn)題檢查 Agent 決策日志和下游日志修正 Agent 邏輯或下游服務(wù)調(diào)用頻率超限Agent 陷入循環(huán)或業(yè)務(wù)量突增檢查調(diào)用頻率和 Agent 狀態(tài)修復(fù) Agent 循環(huán)或調(diào)整頻率閾值令牌申請(qǐng)失敗身份憑證無(wú)效或授權(quán)中心故障檢查憑證和授權(quán)中心狀態(tài)更新憑證或修復(fù)授權(quán)中心調(diào)用鏈異常中斷熔斷觸發(fā)或網(wǎng)絡(luò)問(wèn)題檢查熔斷日志和網(wǎng)絡(luò)狀態(tài)排查熔斷原因或修復(fù)網(wǎng)絡(luò)這張表覆蓋了我遇到的大部分問(wèn)題。實(shí)際排查時(shí)先對(duì)照現(xiàn)象找到可能原因再按排查方向逐步確認(rèn)。6.4 幾個(gè)獨(dú)家避坑技巧最后分享幾個(gè)不太常見但很實(shí)用的技巧。技巧一給工具調(diào)用加 trace ID。每次 Agent 發(fā)起調(diào)用時(shí)生成一個(gè)唯一 ID貫穿整個(gè)調(diào)用鏈。這樣排查問(wèn)題時(shí)一個(gè) ID 就能串起所有相關(guān)日志不用在多個(gè)日志文件里翻找。技巧二定期做權(quán)限審計(jì)。每隔一段時(shí)間導(dǎo)出所有 Agent 的權(quán)限配置人工審查一遍??纯从袥]有權(quán)限過(guò)大的、有沒有長(zhǎng)期不用的、有沒有配置錯(cuò)誤的。我一般一個(gè)季度做一次每次都能發(fā)現(xiàn)幾個(gè)問(wèn)題。技巧三用影子模式測(cè)試新權(quán)限。新增或修改權(quán)限配置時(shí)先開影子模式讓新配置只記錄不生效。觀察一段時(shí)間確認(rèn)新配置不會(huì)誤傷正常業(yè)務(wù)后再正式生效。這樣避免配置錯(cuò)誤導(dǎo)致業(yè)務(wù)中斷。技巧四給 Agent 的行為做基線。記錄每個(gè) Agent 的正常行為模式比如常用工具、調(diào)用頻率、參數(shù)分布。當(dāng)實(shí)際行為偏離基線時(shí)告警。這個(gè)基線不需要很精確粗略的統(tǒng)計(jì)就能發(fā)現(xiàn)大部分異常。技巧五保留人工介入的通道。無(wú)論權(quán)限控制做得多完善都要保留人工介入的通道。當(dāng)系統(tǒng)判斷不了時(shí)能轉(zhuǎn)人工當(dāng)系統(tǒng)誤判時(shí)能人工放行。完全自動(dòng)化的權(quán)限控制在遇到新情況時(shí)往往束手無(wú)策。這些技巧都是實(shí)際項(xiàng)目中驗(yàn)證過(guò)的不是什么高深技術(shù)但很實(shí)用。權(quán)限控制這件事細(xì)節(jié)決定成敗把這些細(xì)節(jié)做到位Agent 的工具調(diào)用就能既順暢又安全。我在實(shí)際使用中發(fā)現(xiàn)權(quán)限控制最難的不是技術(shù)實(shí)現(xiàn)而是平衡。控制太松Agent 容易失控控制太緊Agent 又干不了活。這個(gè)平衡點(diǎn)需要根據(jù)業(yè)務(wù)場(chǎng)景反復(fù)調(diào)整。我的經(jīng)驗(yàn)是先從緊的開始遇到阻礙再逐步放寬比一開始就放松要安全得多。畢竟權(quán)限這東西收緊容易放寬難一開始就收緊后面調(diào)整的空間更大。
返回列表
PREV
查看更多資訊
NEXT
返回資訊列表
成人网站 免费观看| 超碰在线1234区| 亚洲好色人妻| 尤物黄色在线观看网站| 四虎AV无码| 欧美AB在线| 激情专区综合| 精品无码一区二区三区| 囯产操逼片| 久久久久久久久久久久久久久久9| 97碰| 91红杏| 视频国产成人精品日本亚洲18| 色色操| 久久精品区| 色牛牛AV| 91色射| 美国aaaaa一级黄片| 日韩国产十八禁| 日韩啊V| 热天堂一区二区| 在线欧美亚洲| 日韩乱码Av| 亚洲国产综合图区中文字幕 | 91综合色噜噜| 九九热免费在线国产视频伊人五月| 亚洲 在线| 国内精品999| 国产60页| 亚州综合AⅤ| 亚洲高清无毛一区二区| 男生女生啊啊啊啊| 久草网站免费在线观看| 亚洲中文字幕av| 婷婷五月色| 日本幼女18+| 亚洲nv男人的天堂网| 午夜精品久久久久久久久久久久久| 色色婷婷五月天| 亚洲情色 自拍| 99丝袜福利在线播放| 秋霞 色色| 欧美成人亚洲精品| 欧美日韩岛国大片在线观看| 国产精品欧美在线观看| 91在线美女| 2017人人操,人人摸| 天天摸夜夜操视频| 丰满的三级少妇欧美久久久| 欧美乱欲| 天天爱综合网| 91 手机在线播放 绯色| 天天操天天舔| 国产乱伦视频污| 精品久久大胆人体| 精品人妻伦一二三区久久| 精品一级毛片在线观看| 少妇专区一二三四五| 中国亚洲呦女专区| 视频一区二区免费在线| 东京热,男人的天堂| 男人的天堂2010| 中文字幕奈奈美被公侵犯| 青青操视频在线| 玖玖在线视频| 乱论91| 78超碰| 日韩视频小说在线观看| 少妇二级| 天天看,天天做| 无码一区免费在线不卡| 青青操在线视频| 粉嫩国产精品久久久| 九月婷婷久久| 激情五月婷婷| 免费黄色片。| 欧美日韩另类在线| 国产久久久久久| 国产二区三区粉嫩在线| 国产青一二三| 激情自拍 校园春色| 天天操夜夜操狠很操| 欧美性夜| 人人妻人人色一区二区三区| 欧美大片一区二区三区 | 欧美性爱18观看| 欧美亚洲中文字幕| 骚日日av| 嗯嗯嗯嗯啊啊啊好紧好大| 日韩综合色网| 混色激情av| 偷拍三区| 欧美精品久久96人妻无码| 99热精品在线观看| 黑人在线91| av线电影| 操死我了啊啊啊| 久久av网| 粉嫩国产精品久久久| 9久综合网| 无码视频黄色网战| 99日韩| a级理论午夜日本| 97在线观看播放视频| 日语五十路和六十路亚洲国产精品| 亚洲性高潮| 日本 情色 1区2区3区| 激情欧美日韩女同久久| 老司机午夜福利视频一区二区| 国产13区| 九九九影院| 9久精品视频在线观看| 污到发麻的视频 国产| 嗯嗯啊中文字幕| 日韩中文字幕二区| 丁香六月激情| 91欧美长吊| 久草资源在线视频官方总站日韩丝袜美腿 | 啊啊啊啊啊啊在线| 免费中文综合精品| 人人操人人插人人摸人人干| 日本免费人成视频播放120秒| 国产福利视频精品视频| 97人人操人人摸人人爱| 一级久久久久久久久久久| 操操逼操操逼操操逼逼| 91GD.COM| 亚洲少妇色| 亚洲18禁| 狠狠躁天天躁日日躁| 91激情网| 天天干夜夜鈤| 激情黄色片在线观看| 人人操人人爽人人操人人| 日韩激情无码影院| 日本在线不卡v二区| 国产亚洲精品玖玖玖在线观看| 国产在线视视频有精品| 偷拍欧美激情| 女生自91网站| 亚洲,欧美,综合网| 另类图片综合| 亚洲欧美激情在线视频| 亚洲18禁| 五月天加勒比啪| 情色五月天就去干| gogogo免费高清看中国国语| 超91综合网| 国产久久日韩网站导航| 亚洲欧美洲综合| 日本不卡一区| 久久久亚洲高清不打码| www.狠狠| 极品久久久久久久久久久久久久| 91男人综合| 黑人娇小av在线播放| 超碰在线欧美性爱激情| 精品在线观看视频在线| 日日妻色网| 精品对白久久不卡| 白嫩国模丰满一二三区| 精品视频123区小说区| 99热日| 男人天堂2017| 日本亚洲熟女视频| 传媒免费一区二区三区| 国产精品99999| 怡红院一区二区熟女人妻| 大香蕉 222| 91男人天堂网| www.99色| 91女网站| 97se亚洲综合自| 99久久e免费热视| 啊啊啊啊啊在线观看网址 | 午夜天天碰综合视频| 91无码人妻| 一二三区操逼国产91| 国产女人成人精品视频| 最新9久久久9免费视频| 国产精品久久久吖| 久久国产精品一级二级三级| 天天色综合影视网| 玖玖玖玖精品国产剧情| 欧美精品偷拍| 亚洲免费在线探花| 亚洲自拍一区夜夜操 | 精品9区| 老熟女91| 亚洲狼狼干综合1| 上床啊啊啊| 日本国产高清色www视频在线| 伊人久久大香线综合无码| 成人性交午夜免费片| 日韩精品永久在线观看| 91熟女.com| 秋霞一级鲁丝片A片| 丁香六月婷婷综合| juliaann欧美丝袜办公室| 在线观看日韩av不卡| 色超碰综合| 国产无码高清操逼视频| 歐美性天天| 2019精品国产无码成人| 99热这里只有是精品10| 白天啪啪晚上啪啪视频| 亚洲色图第四色| 草草网站影院白丝内射| 精品人妻视频一区二区在线播放| 肉嘟嘟www视频在线观看高清| 91n免费处女| 91三级理论片播放器| 久久一本大香蕉 | 岛国激情视频软件| 久热大香蕉网站| 强奸国产在线| 国产和美国毛片| 日韩色| 伊人久大| 婷婷久久综合| 欧美性xxxxx狂欢| 国产免费大片| 9丨亚洲一区二区在线| 精品国产99| 美女极品一区二区三区| 久久色AV线| 婷婷丁香五月激情啪啪| 色噜噜国产精品视频一区二区| 亚洲综合激情五月久久| 欧美综合天天| 97超碰亚洲| 亚洲av综合色| av天堂电影网| 麻豆AV96熟妇人妻| 2024人人操人人摸| 尤物网址| 欧美亚洲韩国视频十五区 | 国产精品国产拍高清AV| 人人妻人人爱人人玩| 性欧美天天| 中国乱伦一区二区| 91亚洲欧美激情| 美女久久久久久久| 中文字幕在线日亚洲9| 欧美97爱| 国产视频小说| 五月综合色| 在线观看一级α片刺激高潮视频| 超碰人人干天天射| 精品国产99| 亚洲操人| 一区二区免费电影久久| 中文字幕蜜乳av| 中文字幕、久久精品国产2020、久久综合久久自在自线精品自、亚洲 | 天天躁夜夜躁狠狠躁AV| 久久大陆| 天美国产三级传媒| 综合影视国产无码| 日本人妻伦在线中文字幕| 一本色道久久综合熟妇| 久久国产精品一级二级三级| 97欧美性爱| 色网色网色网色网色网色| 久久综合av| 精品久久久久,69国产成人精| 天天摸夜夜添无码小视频| 久九九九九九九九热| 欧美 青青草| 性爱av网站| 久热在线精品免费观看| 日本色日夜干| 漂亮人妻被强中文字幕hd| 黄色不卡视频| 岛国小电影| 久久人人看| 欧美日产国产在线成人第一区| 97资源亚洲| 亚州中文字幕超碰97| 69人妻精品一区二区绯色| 操迟操逼在巾线Fre看| 校园春色亚洲| 一区二区乱码福利| 另类欧美色| 国产尤物在线三区| 久操| 97视频新免费| 色悠久久久av| 亚州乱码中文字幕综合久久久| 国产1727欧美| 美女人妻色网站| 美女黄频a美女大全免费皮| 少妇无码999| 久久久久久久久久久久久9999| 国产亚洲精品农村妇女| 人妻在线视频| 久久久久久AⅤ无码免费肉站| 性生活久久久久久久久久| 九九九精品成人免费视频小说| 伊人久久大香蕉线AV五月天| 欧美日韩性爱无码| 国产传媒操逼视频| 亚洲AV操| 色播综合| 色欧美天天| 亚洲另类在线观看| 婷婷五月天伊人| 欧洲色| h在线看免费版在线看| 成人午夜视频免费播放| 97天天摸天天碰| 日日日日日| 国产毛片精品一区二区色欲黄A片| 人人摸人人干人人拍97| 福利在线观看一区二区| 国产精品无码AV网站| 国产色精品午夜大片| 丝袜美腿制服人妻二区中文字幕 | 亚洲天堂人人妻| 精品久久久久久久久久久久 | 性爱综合网| 91狠婷| 色婷婷在线视频精品导航| 亚洲人在线| 亚洲揄拍网| 九九九九一级| 综合网少妇| 亚洲91色| 少妇人妻好深太紧了vr91| 综合操逼| 91色黑人少妇| 999熟女精品| 超碰久超碰久| 欧美午夜视频免费观看| 超碰人人草| 久久久久久久久久久久久9999| 熟妇视频一区二区三区在线观看| 久久久精品中文字幕麻豆| 久草电影网| 偷拍 欧美 日韩| 天天色天天干天天射| 强奸xx国产| 亚洲情色五月天 | 91人人爽人人爽人人人,gav福利视频导航,日韩欧美亚洲国产字幕四区 | 亚洲国产婷婷在线播放| 五月丁香狠狠爱| caopeng97人妻| 加勒比综合a∨| 啊啊啊啊啊在线| 岛国免费黄色网址| 五月久久HDAV| 91在线一起| 秋霞色色影院| 久久精彩免费视频| 狠狠色一区二区中文字幕| 9精品久久久久| 亚洲无码 国产无码| 国产97色在线| 亚州色国| 日韩av性爱在线播放| 天堂8在线新版官网| 国产精品久久久久绯色| 999久久久久久久久| 自拍偷拍草一草| 九九aV| 亚洲欧洲久久天堂| 国产精品不卡高清在线观看| 久久女婷| 国产av色网| 人妻无一区二区三区| 亚洲综合婷婷| 一级黄碟| 蜜乳Av成人片网站| 日本亚洲vr欧美不卡高清专区| 黑人粗大V S日韩女优视频| 日韩欧美性吧婷婷乱伦大香蕉 | 免费观看性欧美一级| 色情婷婷| 欧美色爱综合| 国产福利av精彩对白| 国产丰满熟夫69mpp| 日韩人妻丝袜中文字幕| 99久久婷婷| 最新9久久久9免费视频| 狠狠色狠狠色狠狠五月| 91美女色视频亚洲| 另类小说综合网| 91美女视屏| 一区二区三区四区理论片| 色99视频| 91亚洲黄色网| 狠狠干综合| 欲香欲色综合天天伊人| 小少妇| 91综合网站| www.91久久| 黑丝制服中文字幕| 色婷婷五月综合激情中文字幕| 91影视亚洲| 蜜乳av一区二区| 久干网| 中文字幕乱在线伦视频中文字幕乱码在线| 欧美丝袜激情| 一本色道久久天天射天天干| 欧美精品91| 亚洲黄片免费在线播放| 日韩懂色网| 欧美色视频在线| 亚洲十八禁止| 99久在线精品99re8| 操熟女91| 日韩精品三区四区| 国产成人自拍视频视频| 91艹| 久久人妻视频| 99久久无码| 天堂精品小草| 国产福利av精彩对白| 一区二区三区男人的天堂| 婷婷精品视频| 一道α片欧美| 蜜臀无码一区二区| 人妻少妇色综合| 婷婷久月| 久啪| 丁香五月天啪啪| 操一操摸一摸| 99精品人人爽| 蜜桃视频精品一区二区| 亚洲天堂五月天国产| 97超碰免费人人性爱| 一区三区啪啪| 欧美高清18A片| 欧美91网站| 亚洲激情av| 中国操逼无码| 一二区在线观看视频| 欧美性天天影视| 91碰超| 99少妇| 91欧美长吊| 国产原创剧情在线丝袜 | 97视频新免费| 99精品丰满人妻无| 欧美丝袜制服久久| 91精品人| 国产夫妻性生活视频| 天天操女人| 色呦呦呦在线观看视频| 中文字幕蜜乳av| 欧美第二页午夜| 超碰 97国产熟女| 亚洲午夜福利在线影院| 黑人免费福利视频| 2019男人的天堂| 日本不卡码黄色 | AV一起草在线| 午夜精品久久99蜜桃的功能章节| 欧美综合 站| 极品五月天噜噜| 亚洲精品日日夜夜52| se吧提供91精品国产91久久久久久 | 五月天久久久| 人人操人人uiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiiii | 日本久久综合| 800zy一区二区| 色婷婷综合网| 亚洲最大无码中文字幕网站| 91成人高清在线观看| 一二三区精品视频| 97在线播放 | 岛国小电影| www激情| 日本高清_区二区三区| 少妇厨房愉情理伦片bd在线观看 | 久久曰曰| 欧美日韩免费专区在线| 97免费在线视频在线观看| 日本污ww视频网站| 在线观看综合精品亚洲| AAAAAAAAA黄片| 热无码中文亚洲H一道本一区二区| 日韩精品 欧美激情| 天堂精品| 99久在线精品99re8| 91真人天天在线| 亚洲综合码| 欧美成人9797| 欧美日韩国第一区| 色 婷97| 色女综合| 无码视频一区二区| 天天内射| 欧美在线中M| 亚州高清av| 龙兴卡官方查询| 伊蕉97蜜桃97狠狠综合干| 欧美精品第四五页中文字幕在线观看| 蜜桃精品一区二区三区ww | 在线99热| 狠狠操夜夜操蜜桃视频三区| 女优视频第10页| 91亚洲黑人| 性色AV蜜色av色欲av| 日韩无码一区二区三区| 亚洲一区日韩精品中文字幕| 国产午夜福利电影免费在线观看| 91成人高清在线观看| 久久欲| 精品国产丝袜一区二区三区乱码| 欧美日韩香蕉| 九九热AV| 韩国轻伦国内自拍一区| 韩国女主播青草在线| 久久久专区| 东京热AV男人的天堂| 易易A毛视频| 久久久9999| 国产成人拍国产亚洲精品| 无码外流操逼视频| 亚洲1区2区三区高清中文字幕| 欧美东京热精品A∨| 国产成人综合网| 美国美女AV在线| 欧州激情视频在线一区二区| 亚洲熟妇综合久久久久久| 亚洲色婷婷综合久久久久中文| 亚州性9| 性爱乱伦视频免费| 99色在线视频| 国产亚洲欧洲在线观看| 97综合久第一页| 久久天堂| 一区二区三区精品视频| 最新加勒比丝袜在线| 91成人国产综合久久精品蜜月| 亚洲s色图| 精品九九九九九九| 国产成人综合在线播放| 久久极品伊人| 国产风韵犹存熟妇三区| 爱爱动态60秒| 黑人无码一区二区| 亚洲 欧美 另类 综合 偷拍| 青青草原av| 精品国产一区探花在线观看| 日韩AV一起草| 九九热这里只有在线精品视 伊人草 成人菠萝蜜视频在线观看 | 超AV色女| 久9爱精品| 久久免费99精品久久久久久| 亚洲综合激情五月久久| 中国熟女网站| 日日干天天干夜夜爽| 久久这里只精品99re66图| 欧美狠狠弄| 精品日日人妻| 色爱三区| 亚洲精品 欧美精品| 天天插网| 丁香五月影院| 久热这里| 日本人人操人人操| 亚洲少妇色图自慰直播| 亚洲爽图| www.狠狠干.coom | 久久伦理视频久久大香蕉视频| 三级色影综合网| 曰韩成人免费视频| 久湿久久 | 99色网| 99视频只有精品| 青青草狠狠撸| 丰满人妻一区二区三区四区| 久久精品72| 九九九久久久| 亚洲情色第一页| 亚洲 欧美 第一页| 国内毛片无码一级毛片| 伊人久大| 操碰91| 综合亚州欧美| 欧美黄色片AAAAA| 欧亚韩国999| 日韩欧美一级特黄大片| 国产诱惑| 91狼人| 欧美后入式| 国产乱伦一二三区| 日韩91网| 麻豆人妻精品一区二区| 97 色综合| 殴美,日韩国产伦精品| 国产99999| 9/A片| 亚洲麻豆av一区二区| 伊人大香蕉在线| aaa亚无码专区| 亚洲精品天天影视综合网| 天堂69亚洲精品中文字| 超碰97男人| av网站在线观看了| 九九九九九九免费视频| 丁香五月激情综合国产| 一区二区三区一亚洲中文字幕、综合区灬 | 国产日本一区二区三区蜜臀在线观看| 成人AV素股で擦久久| 91啦人妻| 大香蕉综合在线| 性爱乱伦网址| 91亚洲综合在线| 天天香香欲综合| av天堂精品久久| 日本 情色 1区2区3区| 九九热在线精品视频| 视频不卡中文字幕| 欧日韩在线观看| 久久久 国产精品| 国产97色在线| 国产成人主播| 四色永久成人网站| 亚洲熟女乱色一区二区三区| 91N综合网在线| 思思热在线观看| 亚洲精品一二牛牛| 超碰到97情色| 91在线页| 欧美日韩一区二区三区四区蜜桃| 精品无av| 最新中文字幕av| 熟女被操视频网址| 无码久久国产 | 欧美天天综| AV无码久久久精品| 久久超碰国产一区二区三区| 精品妇操一区二区三区| 亚洲色偷偷色噜噜狠狠99网| 超碰在线香蕉| 欧美少妇色图| 97亚洲国产| 精品一区96| 黄色av一区二区在线| 中文字幕人妻资源在线| 欧美日韩亚洲少妇寂寞影院正在播放 | 在线人人人人人人精品超 | 日天天九九天堂666| 国产60区。| 国产精品老师| 超碰在线观看av不卡| 91精品人妻一品二品三品| 伊人久久亚洲中文字幕不卡| 精品国产乱码久久久久久影片| 在线综合色| 国产91亚洲精品一区二区三区| 91中出在线| yy少妇精品久久| 蜜桃精品一区二区三区ww| 久久美女福利是上海美女| 影音先锋日本一区二区| 精品熟女呻吟久久91| 91九色丰满高潮| 久久久久ab| 艳美熟妇先锋一二三区| 超碰99在线观看| 岛国艾薇凹凸视频天堂| 欧美日韩国产另类综合| 日韩三级伊人| 欧美日韩久久精品爱爱| 亚洲人妻久久久| 成人片视频| 亚洲97P| 99re3这里只有精品| 加勒比大香蕉视频在线| 日本三级韩三级99久久| 成人性爱美曰韩| av天堂天堂av日韩| 少妇无码av专区线| 在线综合 亚洲 欧美中文字幕| 国产在线播放成人免费| 欧美亚洲| 天堂v无码免费视频| 人妻久久一区二区三区 | 91色射| 精品国产乱码久久久久久日本公司| 裸体美女久久久| 久操在97| 久久偷偷色综合蜜桃| 久久一本大香蕉| 人妻超碰青青草98| 91 国产丝袜在线播放-百度| 蜜臀无码一区二区| 乱操9999| 久久老熟女| 91人妻熟女| 日本不卡二区| 国产精品4p在线观看| 日韩福利综合一区| 亚洲精品xxx| 欧美视频一区二区在线| 亚洲一区二区三区欧美日韩| 中文字幕日本久久| 激情开心五月天| 蜜臀久久一区二区| 天堂日本亚洲欧美| 区二区亚洲婷| 91亚.色| 91亚洲图片| 天天日天天干天天操| 日韩日本欧美在线观看| 草草影院最新网址| ?亚洲伊人伊成久久人综合网| 国产 v乱码一区二| 婷婷五月天福利| 第二页中文字幕| 天天内射| AV中文字幕三四五| 欧洲在线性爱视频| 操逼片国产| 久久女婷| 亚洲瓯美色图| 亚洲极品| 七月丁香婷婷| 操逼逼中文字幕| 这里有精品| 97自拍一区| 精品丰满熟妇人妻一区| 久久精品一区二区三区四区五区| 美国人人操人人操| 激情开心五月天| 熟妇高潮一区二| 久久久无码精品人妻二区 | 90后后入| 超碰97人妻免费在线| 日韩激情中文字幕有码| 少妇 综合| 日本孕妇孕交| 天天澡天天爽日日AV| 黄骗免费| 国产久久视频| 中文字幕欧美精品亚洲日韩蜜臀| 国产亚洲福利第一页丝袜| 亚洲欧洲网站免费观看| 动漫片子网站3黄| 神马久久免费电影观看| AV一区观看| 久久麻豆一区二区| 9ⅰ久久久天天| 富女玩鸭子一级毛片| 亚洲欧美中文日韩视频中国语| 亚洲色欲一区二区三区| 台湾佬大香蕉| 国产精品无码在线| 啊啊啊啊啊好大好舒服想要| 97在线视频网站| 亚洲成熟国产精品美女| 国内操逼视频二区| 大色综合| 色婷婷av在线观看| 粉嫩av一区二区三区四季| 亚洲性爱成人| 麻豆亚洲Av成人无码一区精品| 超碰在线成人电影| 萌白酱自拍视频| 蜜桃在线观看一区二区三区| 成人怡红院| 亚洲黄色影视| 台湾佬中文娱乐网久久久久久久久久com | 日韩电影天堂视频二区三区| 性色AV网站| 中文字暮97| 欧美性性性| 婷婷五月天色色| 中文字幕av片| 一个人免费HD91视频| 大乔未久88一区| 国产一区二区在线播放量| 精品国产网站| 国产h小视频在线观看免费| 性爱视频久久| 午夜九九九九九九| 另类小说五月天| 亚洲一区二区中文字幕| 国产精品秘 福利姬在线观看| 日本加勒比无码专区一二三| 操B在线观看| 一区二区亚州激情久婷婷欧美| 国产人伦a片信息免费片| 国产乱人妻精品入口| 国产久久成人| 久久久久密臀视频| 久久精品国产亚洲AV嘿嘿| 韩日精品福利视频一区不卡在线免| 国产多人在线观看视频| 久操九九九九九九九九九九九九九九九九九九九九九九九九九九九九 | 东京热,男人的天堂| 狠狠色婷婷7777久| 久草新在线| 超碰亚洲欧美日韩无| 久久国产乱子伦精品免费女,网站| 亚洲综合精品国产一区| 欧美天堂亚洲电影院一区在线播放| 男女激烈网站最新| 人人搡人人肉久久精品| jizzjizz欧美| 99日免费视频中文字幕| 乱伦熟女区| 97欧美日韩综合| 色情综合网| 亚洲欧美情色| 啊a一区在线| 亚洲婷婷丁香在线| 91操人| 人人操人人摸超碰| 另类小说五月天| 爱逼综合| 少妇诱惑视频| 亚洲高清无码AAA久久久精品| 超碰吊日色| 亚洲影视综合网| 五月天婷婷在线看| 国产乱码精品久久久久久| 精品亚洲黄色片 国产精品导航一区二区| 偷拍五区| 亚洲精品99| 日韩激情无码影院| 一区超碰一区| 99久久com免费视频′| 久久av无码| 天美传媒精品一区二区三区| 五月天婷婷色| 51久久夜色精品国产麻豆| 欧美亚洲宗合色性图| 国产超碰在线| 91被操| 国产精品对白自产拍| 少妇无码太爽| 日韩一性一交一A片俄罗斯| 国产一区在线看| 欧美激情欧美精品| 九九色逼| 日韩免费在线观看不卡| 青青草原av| 又摸又舔在线观看网站| 麻豆国产96在线| 欧美中文字幕日韩在线| 素人伊尹大香蕉免费下载视频| 67194无码不卡| 国产 亚洲 丝袜 制服| 校园春色综合网| 中文字幕一品色图| 色女99一级片在线观看| 999岛国大片| 91久久久亚洲| 九九热精品视频六| 国产欧美美女免费观看视频| 亚洲欧洲日韩国产自在线| 亚洲欧美日韩中文播放| 肉丝无码中文高清| 国产精品色哟哟| 超碰成人免费| 久久高清欧美国产| 97超碰中文在线| 一二三四区电影| 天美传媒Av在线| 人妻天天夜夜爽一区二区| 自慰白浆在线观看| 一级二级三级黑人无码| 97综合网| 人爽不卡视频| 精品国产综合久久福利,热99这里有精品综合久久,99热这里只有免费国产精品,精 | 男人干美女| 97香焦色区| 狠狠操综合| 特级丰满少妇一级AAAA爱毛片| 成人无遮挡毛片免费看| 国产精品扒开腿做爽爽爽视频| 男人的天堂三级| A男人的天堂| 久久久久9999妇女| 调教熟妇 久久久久久| 欧美精品自慰系列寂寞少妇| 日韩亚洲精品一区二区| 欧美高清无码免费视频高清版| 天天做天天爱| 熟妇色99| 丰满少妇一区二区三区免费看| 亚洲中文字幕久久无码精品| 超碰1997| 91无码人妻| 欧美日韩青操| 久久精品人妻一区二区| 夜夜爽爽夜夜精品视频| 麻豆一区在线| 91丝袜在线视频| 久久久久久久久久久久黄色| 欧州激情视频在线一区二区| 蜜臀久久99精品久久久久免费观| 久草精品热视| 天堂资源欧美| GVH-003 母子姦 青木玲-麻豆视频,麻豆视传媒短视频网站入口,麻豆视传媒官网直 | 夜夜骑操视频| 色网综合网| 超碰97在线色男人??| 99热18这里只有精品| 亚洲性少妇| 久久成人精品| 久久午夜神马| 精品久久97| 操逼操2| A级国产欧美激情在线| 91久久免费视频互動交流| 国产一区自拍欧美日韩| 樱花蜜乳av| 女人喷水视频在线观看| 亚洲蜜桃V妇女| 天美麻花大全视频| 人妻少妇久久久| 青青操青娱乐| 1234区中文字幕在线观看_青青草国产在线_日韩一区二区 | 国产熟女完整版中字| 人人操人人摸人| 国产女人成人精品视频| 婷婷爱五月| 婷婷情色综合网| 躁躁日曰躁2020| 丰满人妻一区| 四虎精品永久在线观看| 亚洲色人| 亚欧毛片基地国产毛片基地| 色乱二区| 天天插天天射| 欧洲Au麻豆| 99re在线视频国产| 在线啊啊啊| 美女黄网| 97人人操人人摸| 日本福利二区视频| 日韩素人无码一区二区三区三州| 99国产天美| 国产97综合| 成人一二三区| 久久伊人亚洲AV无码网站| 激情五月天社区| 91 手机在线播放 绯色| 日本东京热大香蕉a片| 99re这里只有精品2| 男人天堂网站| 日韩欧美亚洲一区二区三区影院| 熟女视频久久| 亚洲美女色图| 97久久久久| 乱性AV| 久99视频| 日欧毛片久久| 精品对白久久不卡| 午夜偷拍久久熟女| 丰满人妻一区二区三区免费,| 美美91成人国产精品欧美精品久久久久久久 | 激情丁香五月婷婷| 日韩 欧美 校园一区| 久久久日本电影| 亚洲AV无线| 国产最新AV| 91美女视频直播| 五十路六十路七十路熟婆| 人妻嗯啊啊在线播放| 60秒免费小视频| 亚洲性爱成人| 亚洲人妻av| 久久爽爽精品| 亚洲中文丝袜美腿诱惑字幕| 夜嗨影院| 欧美一二三区四五区| 久热这里只有精品9| 综合免费无码中文| 国产九九久久久精品| 欧美情色贴图| 97超碰护士| 长长久久免费视频| 蜜臀久久99精品久久久久久婷婷| 国内精品久久人妻性色av| 人人操天天爽| 亚洲成人av色网| 天天操女人| 一区二三区四区视频大全套| 日韩亚洲中文字幕在线| 中文字幕一区二区三区50路| 18禁精品网站在线看| 日本三级久| 国语精品av| 欧亚乱色熟女一区二区| 在线观看视频91| 亚洲国产丝袜熟女av| 99热精品在线| 亚洲第一页色网| aⅴ日韩成人电影av在线免费看av大全 | 午夜精品人妻二区三区| 高清国产性猛交xxxx乱大交| 亚洲AV无码久久久国产精品| 蜜臀无码一区二区| AV不卡在线| 99精品伊人| 无码国产Av| 天天操人人操骚逼网站| 日韩激情毛片一级久久久| 欧美一二三区四五区| 极品销魂美女一区二区| 亚洲91av| 老司机福利青青草| 青青草视频爽一爽| 91狠狠综合| 色老汉色| 99e久久国产精品| 亚洲综合影视| 日韩精品在线视频在线观看| 欧美成人综合| 国产精品嫩草影院免费| 色婷婷一区二区三区久久午夜| 无码聚合| 国产91丝袜 在线播放| 九九成人| 欧美亚洲首页| caorenqi shipin| 亚洲av性爱电影| 97色欧州| 久草国产在线视频| 激情文学亚洲| 精品性爱一二三区| 中文字幕一区二区三区人妻不卡 | 国产亚洲性生活视频播放| 视频在线观看一二三区| 午夜福利无毒不卡| 天天草AV| www.丁香五月| 亚洲熟伦熟妇AV无码春色| 97超视频在线观看| 成人性爱av.com| 天天射天天色成人| 二区熟妇韩日| 无码最新| 久久精品无码专区| 亚射在线| 免费簧片在线观看| 日夜伊人网| 艳尻美人妻| 91人妻做a观看视频| 久久有码视频| 久草色悠悠在线视频| 日韩激情啪啪| 野狼福利社区| 日本九九久久99| 激情五月天色播| 襙一襙| 蜜桃午夜视频一区二区 | 99操视频| 午夜小电影在线插入淫高潮| 亚洲资源网| 偷拍伦理视频| 色狠狠 - 百度| 性色aV一区二区三区噜噜| 热久日综合| 凹凸视频特色日本特黄| 无码人妻一区二区三区色欲aⅴ | 天天舔天天 | 久操国产在线| 91路www| 国产馆极品诱惑| 国产精品自拍欧美在线| 久久一二三四| 色天天野狼综合社区| 久久有碼| 人人操AV| 国产 无码 一区二区| 久久婷婷电影网| 玖玖草久草99蜜月一区二区三区| 91狠婷| 久久性视频| 久久久亚洲Av| 日本人妻最新在线中| AV色女综合| 青青伊人加勒比海| 亚洲熟妇无码一区二区三区| 色色色色综合网| 精品一区二区国产日韩| 欧美人妻一区二区| 91超碰碰在线| 亚洲狼狼干综合1| 久久综合99| 免费黄色A片| 天堂无码精品国产久| 欧美v亚洲v综合v国产v妖精| 午夜在线播放| 色97国产69香蕉| 欧美 综合 亚洲| 国产丰满少妇久久久精品影院| 午夜男人天堂| 男人天堂久久精品| JULIA一区二区三区在线播放| 九月丁香婷婷色| 思思视频免费看网站| 男女无套 免费网站| 葡萄牙性视频一二区| 精品日日人妻| 欧美日韩国产色五月综合在线| 亚洲精品 欧美精品| 免费网色网站| 亚州乱码中文字幕综合久久久| 欧美在线官网| 国产在线精品偷| 无码日韩网站| 人、人、摸,人、人、草| 欧美午夜一区二区三区| 欧美性生活免费网| 特级特黄一级毛片免费| 中文字幕美女91| 我要色综合网| 精品人妻一区二区免费蜜桃视频| 97超碰9| 先锋女优在线观看视频| 极品出轨视频网站| 人妻激情视频| 亚洲第一页色网| 欧美热图99| 9丨久久九九九| 啊啊啊想要| 国产无码成人无码| 超碰午夜| 狠狠色噜噜狠狠狠狠2018| 一二三四视频中文字幕在线看| 亚洲AV无码乱码| 91欧洲国产成人久久精品网站| av毛片aaaaa免费看| 欧美中文字幕日韩在线| Sekablack无码一区| 欧美黄色片在线播放| 欧美另类综合久久| 日本操逼视频导航| 欧美性巨大╳╳╳╳╳高跟鞋| 99热在线观看| 丁香五月婷婷五月| 97人肏| 台湾大香蕉99热| 午夜无码熟妇丰满人妻| 亚洲熟女一区二区| 欧美劲爆第一页| 青娱乐999| 日韩综合无码色欲vv| 免费av高清无码| 亚洲av影院在线观看| 99操| 久久九七| 中文在线视频| 玖玖久久久| 国产亚洲日韩欧| 国产女人成人精品视频| 亚洲啪啪性视频| 成 人 影视 一区 二区 三区 四区 | 老熟女搡BBBB搡BBBB视频| 婷婷中文网| 天美av在线观看| 欧美韩国你懂得在线 |