第十九屆D2終端技術大會V1第十九屆D2終端技術大會V1面向未來的AI研發(fā)和前端領域大模型第十九屆D2終端技術大會來自螞蟻-平臺智能體驗技術徐達峰（達峰）全棧開發(fā)者/開源愛好者3/xudafeng3第十九屆D2終端技術大會前端AI研發(fā)的幾個突破方向通過意圖生成骨架代碼，或根據工程上下文生成邏通過多模態(tài)能力對產出檢查并自動完善，幫助提升交付品第十九屆D2終端技術大會圖生代碼-解決的核心問題無上游依賴直接輸入圖片完成研發(fā)任務第十九屆D2終端技術大會圖生代碼-解決的核心問題無上游依賴直接輸入圖片完成研發(fā)任務第十九屆D2終端技術大會圖生代碼-解決的核心問題無上游依賴直接輸入圖片完成研發(fā)任務第十九屆D2終端技術大會圖生代碼-解決的核心問題無上游依賴直接輸入圖片完成研發(fā)任務3.采納并交付產物代碼第十九屆D2終端技術大會圖生代碼-解決的核心問題無上游依賴直接輸入圖片完成研發(fā)任務收斂需求解決敞口較少人工干預，交付生產級代碼3.采納并交付產物代碼第十九屆D2終端技術大會圖生代碼-解決的核心問題無上游依賴直接輸入圖片完成研發(fā)任務收斂需求解決敞口較少人工干預，交付生產級代碼跨端、多框架、多語言棧支持3.采納并交付產物代碼第十九屆D2終端技術大會圖生代碼-前端領域大模型High-QualitydataatHigh-Qualitydataatthe10millionscaleHigh-AgilityTrainingPipelineMulti-DimensionalMulti-DimensionalMetricEvaluationEvaluationEvaluationSystemPurePureImageUnderstandingGeneralizationEvaluation,VQA第十九屆D2終端技術大會圖生代碼-前端領域大模型飽和式風格采集千萬級規(guī)模領域數(shù)據集預訓練細粒度橋接飽和式風格采集千萬級規(guī)模領域數(shù)據集預訓練深度融合純圖泛化評測數(shù)據集精準標注200W級領域數(shù)據集后訓練視覺特征與LLM數(shù)據集精準標注200W級領域數(shù)據集后訓練GUI預訓練合成數(shù)據預訓練數(shù)據清洗精篩底座針對性調優(yōu)數(shù)據清洗精篩底座針對性調優(yōu)VisualEncoder-HD高分辨率視覺Encoder，最高2K第十九屆D2終端技術大會圖生代碼-前端領域大模型High-QualitydataatHigh-Qualitydataatthe10millionscaleHigh-AgilityTrainingPipelineMulti-DimensionalMulti-DimensionalMetricEvaluationPurePureImageUnderstandingGeneralizationEvaluation,VQAEvaluationSystem第十九屆D2終端技術大會圖生代碼-前端領域大模型High-Qualitydataat10millionscaleCross-PlatformSupportwithMulti-TechStackHigh-AgilityTrainingHigh-AgilityTrainingPipelineMulti-DimensionalMetricEvaluationEvaluationPureImageUnderstandingGeneralizationEvaluation,VQA第十九屆D2終端技術大會圖生代碼-前端領域大模型圖生代碼High-Qualitydataatthe10millionscaleCross-PlatformSupportwithMultiHigh-Qualitydataatthe10millionscaleCross-PlatformSupportwithMulti-TechStackIconrecognitionHigh-AgilityTrainingLoopstructureandreusehandlingAutoResponsivelayoutMulti-DimensionalMetricSemanticandEvaluationelegantcodevariableEvaluationnamingEvaluationEvaluationSystemPureImageUnderstandingGeneralizationEvaluation,VQA第十九屆D2終端技術大會IR標準IR(IntermediateRepresentation)標準，完備描述GUI世界。已支持60+GUI語義單元的數(shù)據定義，能夠涵蓋行業(yè)流行標準和現(xiàn)代操作系統(tǒng)，作為模第十九屆D2終端技術大會難點案例-模型增強工程確定性輸出是當前最難的部分，每—次幻覺表現(xiàn)背后擴展模型上下文，通過模型矩陣對文字、顏色等細節(jié)第十九屆D2終端技術大會案例：解決封裝性問題案例：解決封裝性問題第十九屆D2終端技術大會演示演示第十九屆D2終端技術大會應用實踐情況設計圖交付動線場景下，3個月邀請覆蓋了400位工程師，AI生產合并20W行代碼OpenAPI能力覆蓋12個BU。25業(yè)務平臺接入將WeaveFox圖生代碼能力應用到生碼或搭24年11月的AB對比報告，常規(guī)研發(fā)組平均耗時/智能研發(fā)組平均耗時=2.7，總用時是2.同復雜度的題目中，最高提升倍數(shù)為5倍第十九屆D2終端技術大會WeaveFox產品·技術開放計劃第十九屆D2終端技術大會WeaveFox產品·技術開放計劃通過開源社區(qū)，逐步開放容器命令行->WebUI->IR標準->CodeGen->模型訓練工具鏈第十九屆D2終端技術大會WeaveFox產品·技術開放計劃通過開源社區(qū)，逐步開放容器命令行->WebUI->IR標準->CodeGen->模型訓練工具鏈第十九屆D2終端技術大會持續(xù)面向產業(yè)未來趨勢，解決問題第十九屆D2終端技術大會持續(xù)面向產業(yè)未來趨勢，解決問題第十九屆D2終端技術大會持續(xù)面向產業(yè)未來趨勢，解決問題意圖生碼意圖生碼智能體AI質檢第十九屆D2終端技術大會持續(xù)面向產業(yè)未來趨勢，解決問題第十九屆D2終端技術大會持續(xù)面向產業(yè)未來趨勢，解決問題第十九屆D2終端技術大會持續(xù)面向產業(yè)未來趨勢，解決問題第十九屆D2終端技術大會持續(xù)面向產業(yè)未來趨勢，解決問題第十九屆D2終端技術大會持續(xù)面向產業(yè)未來趨勢，解決問題第十九屆D2終端技術大會持續(xù)面向產業(yè)未來趨勢，解決問題第十九屆D2終端技術大會在產業(yè)端，領域