大模型驅動的賬戶風險管理平安壹錢包/大數據研發部算法負責人/王永合目錄4.后續規劃目錄3.應用場景介紹4.后續規劃欺詐特征建模與分析專家規則總結與開發基本信息核查確認風險點電話照會客戶確定管控方式已有機器學習模型已有機器學習模型已有數據流轉架構人工參與度低系統運行穩定數據預處理數據清洗數據預處理數據清洗數據集成特征選擇特征構造特征編碼探索性分析數據可視化統計分析相關性分析建模與評估訓練模型交叉驗證模型調優特征重要性評估主成成分分析模型解釋性分析總結特征錄入規則投產驗證人工主導全球金融科技大會命中風控規則命中風控規則信息核查確認風險點無風險電話照會*排除風險解除管制賬戶管制案件小結具有明顯風險有風險傾向*進入案件池多次未接通確認欺詐InfoQ極客傳媒目錄3.應用場景介紹4.后續規劃2.總體目標與方案思路一種非結構化數據分析技術傳統做法：經驗主導，對數據源變化不敏感，容易遺漏、誤判基于大模型：靈活應對變化的數據源，依靠泛化的描述進行數據分析傳統做法：經驗主導，人工總結，效率低下，不成體系基于大模型：借助RAG技術，從海量數據中召回相關知識，高效生成精確、結構化的內容一種低代碼數據運營技術傳統做法：向產品提需求->需求評審->前基于大模型：自定義編排workflow,依靠數據+提示詞快速上線驗證，低成本進行業務探索大模型迭代的數據閉環N風控運營流程的數字化切入風控運營主線流程人工驅動->數字化運營N風控運營流程的數字化切入風控運營主線流程人工驅動->數字化運營提升風險感知與風控決策能力提升風險感知與風控決策能力通過數據流轉+大模型輔助，提高運營處理案件效率標注管理Agent管理線上服務性能監控標注管理Agent管理線上服務性能監控服務探活超時熔斷灰度驗證平臺建設模型配置平臺建設自動化回歸測試創建任務創建任務角色定義預發測試技能管理流程編排版本控制提示詞管理知識庫管理工具集管理提示詞工程場景隔離提示詞工程場景隔離詞槽管理版本控制回歸測試RAG工程多召回策略多知識庫RerankIUR工程建設工程建設Agent工程規劃引擎Agent協同決策引擎BERTBERTERNIE技術框架LangChainPytorchMilvusFaissMistralQwen多模態處理Memory知識構造->知識檢索->增強生成知識檢索知識向量注入問：用戶異地登陸；大額卡券交易；非常規時間發起交易；連續發起多筆交易embedding向量模型txt業務知識文檔ASR切片算法文檔片段1文檔片段2文檔片段3FAQ2FAQ3向量模型文檔片段1文檔片段2文檔片段3FAQ1角色：你是一位風控運營專家，熟知風控領域的各類專業知識和常識，能結合已知內容給出客觀、全面的回答任務：請根據待核查風險點，參考相似案件劇本，一步步思考，生成本次案件的電話照會劇本。險點”,“待核查信息”,“照會思路”,“注意事項”。限制：輸出內容必須嚴格按照給定的格式進行組織，不得偏離待排查風險點：{question}相似案件劇本：{context}你的答案：2.2.3.方案思路-技術介紹(AutoAgent)·通過Prompt定義每個角色的職責和作用AutoAgentAutoAgent任務規劃者任務規劃者任務拆分調用工具任務拆分調用工具MemoryMemory檢索是否已Memory更新YesMemory檢索全球金融科技大會·跳過任務規劃步驟WorkflowAgentWorkflowAgent用戶觀察者任務規劃者用戶觀察者任務規劃者Tool_2Observation_Tool_2Observation_all總結者FCon全球金融科技大會InfoQ極客傳媒目錄2.總體目標與方案思路4.后續規劃3.應用場景介紹全球金融科技大會3.應用場景介紹全球金融科技大會3.1.案件風險點診斷對手信息基本信息、IP對手信息基本信息、IP信息、信用記錄用戶畫像注冊信息、綁卡信息、歸屬地信息、員工標識……異地登陸、設備變化、交易記錄、操作習慣變化……、集團內同賬戶相關信息集團內同賬戶相關信息同設備、同手機、同身份證、同ICCID、同交易對手……Action_1Observation_2SummaryAction_2SummaryAction_2Observation_nAgentsObservation_all理想狀態：強大的LLM+多專家協同+豐富的Tools->風控運營專家·整合簡單風險，聚焦復雜問題新的診斷工具誤”,作為診斷工具優化/下線的依據未刪改：將大模型生成結果標記為“正確”,添加至回歸測試用例庫風險診斷報告-待排查風險點存入知識庫，供后續使用根據workflow,調用工具生成處理結果、處理思路和參考依據結合各工具的結果，生成總結根據處理思路和參考依據快速判斷模型生成結果的可靠性并進行適當的的刪改聚焦其他隱晦的異常信息新增至模型生成結果下全球金融科技大會4.應用場景介紹全球金融科技大會●原流程不包含此步驟，缺少策略制定，依賴個人能力●照會過程復雜，容易迷失方向、丟失細節●過程不留檔，老帶新困難數字化運營業務數字化運營業務·結構化劇本內容，便于知識積累與維護·結合歷史相似劇本進行RAG,增加生成質量·大模型生成內容標注，不斷優化結果i案件基本信息新增：待排查風險點-照會劇本存入數據庫，供后續RAGi案件基本信息自電話照會劇本電話照會劇本全球金融科技大會4.應用場景介紹全球金融科技大會客觀·規范化業務流程核查結果&管控建議·對比劇本和實際通話記錄·確認各風險點的核查結果·案件整體風險評估·生成管控建議·風險核查結果·案件風險判定·管控建議交互文本(ASR)核查結果&管控建議·參考全流程關鍵信息·生成結構化總結文本·歸檔至業務知識庫·達成數據鏈路閉環核查結果&管控建議旅·案件基本信息·待排查風險點·核查結果·管控建議案件小結目錄2.總體目標與方案思路3.應用場景介紹4.后續規劃4.后續規劃·對標注結果分析·問題歸因分析·生成優化方案參考《賬戶運營質檢規范》·是否確認基本信息·是否遺漏風險點·是否有進一步追問/反問析風控運營陪練·參考歷史風險案例·生成風控案件信