國際數(shù)據(jù)庫領(lǐng)域頂級會議IEEE International Conference on Data Engineering（ICDE）公布了2023年度最佳論文獎評選結(jié)果。由上海交通大學(xué)電子信息與電氣工程學(xué)院數(shù)據(jù)驅(qū)動軟件技術(shù)實(shí)驗(yàn)室的研究團(tuán)隊(duì)提交的論文，憑借其在計(jì)算機(jī)軟件數(shù)據(jù)處理服務(wù)領(lǐng)域的創(chuàng)新性突破，從眾多高水平投稿中脫穎而出，榮獲本屆會議唯一的“最佳論文獎”。這一榮譽(yù)不僅標(biāo)志著實(shí)驗(yàn)室在數(shù)據(jù)工程與軟件技術(shù)交叉研究方面取得了國際領(lǐng)先的成果，也彰顯了中國學(xué)者在全球計(jì)算機(jī)科學(xué)前沿領(lǐng)域的卓越貢獻(xiàn)。

ICDE是國際電氣電子工程師學(xué)會（IEEE）旗下數(shù)據(jù)庫與數(shù)據(jù)工程領(lǐng)域的旗艦會議，與SIGMOD、VLDB并稱為數(shù)據(jù)庫領(lǐng)域的三大頂級國際會議。其最佳論文獎競爭異常激烈，評選標(biāo)準(zhǔn)極為嚴(yán)格，旨在表彰對數(shù)據(jù)工程理論與實(shí)踐具有重大、持久影響力的原創(chuàng)性研究成果。

據(jù)悉，獲獎?wù)撐木劢褂诂F(xiàn)代軟件系統(tǒng)中日益復(fù)雜的數(shù)據(jù)處理服務(wù)需求。隨著云計(jì)算、微服務(wù)架構(gòu)和智能應(yīng)用的普及，軟件系統(tǒng)內(nèi)部及系統(tǒng)之間的數(shù)據(jù)流動與處理變得空前復(fù)雜和動態(tài)。傳統(tǒng)的數(shù)據(jù)管理技術(shù)在處理這類服務(wù)化、流式化、高并發(fā)的場景時(shí)面臨性能、可靠性與可維護(hù)性等方面的巨大挑戰(zhàn)。

交大電院數(shù)據(jù)驅(qū)動軟件技術(shù)實(shí)驗(yàn)室的研究團(tuán)隊(duì)針對這一核心問題，提出了一種名為“基于自適應(yīng)工作流與智能調(diào)度的云原生數(shù)據(jù)處理服務(wù)框架”的創(chuàng)新性解決方案。該框架的核心貢獻(xiàn)在于：

1. 數(shù)據(jù)感知的自適應(yīng)工作流引擎：論文提出了一種能夠動態(tài)感知數(shù)據(jù)特征（如規(guī)模、模式、質(zhì)量）與系統(tǒng)狀態(tài)（如負(fù)載、資源）的工作流建模與執(zhí)行引擎。該引擎能夠根據(jù)運(yùn)行時(shí)反饋，自動優(yōu)化數(shù)據(jù)處理任務(wù)的執(zhí)行路徑與參數(shù)配置，從而顯著提升復(fù)雜數(shù)據(jù)處理流水線的效率和魯棒性。

1. 面向服務(wù)質(zhì)量的智能協(xié)同調(diào)度算法：針對分布式微服務(wù)環(huán)境中數(shù)據(jù)處理任務(wù)間的依賴與資源競爭問題，研究團(tuán)隊(duì)設(shè)計(jì)了一套新穎的協(xié)同調(diào)度算法。該算法不僅考慮計(jì)算與存儲資源的分配，更深入建模了數(shù)據(jù)局部性、網(wǎng)絡(luò)帶寬以及服務(wù)等級協(xié)議（SLA）約束，實(shí)現(xiàn)了跨服務(wù)、跨節(jié)點(diǎn)的全局優(yōu)化調(diào)度，有效保障了數(shù)據(jù)處理服務(wù)的端到端性能與穩(wěn)定性。

1. 可驗(yàn)證的數(shù)據(jù)處理服務(wù)可靠性保障機(jī)制：論文還引入了一種輕量級的形式化方法，用于對關(guān)鍵數(shù)據(jù)處理服務(wù)的工作流進(jìn)行建模與驗(yàn)證，能夠在部署前預(yù)測并規(guī)避潛在的邏輯錯誤、數(shù)據(jù)一致性問題及性能瓶頸，為高可靠數(shù)據(jù)處理服務(wù)的構(gòu)建提供了理論工具與實(shí)踐指南。

該研究成果不僅在理論上具有創(chuàng)新性，其原型系統(tǒng)已在開源社區(qū)發(fā)布，并在一家大型互聯(lián)網(wǎng)公司的實(shí)際業(yè)務(wù)場景中進(jìn)行了部署驗(yàn)證。實(shí)驗(yàn)結(jié)果表明，相較于現(xiàn)有主流數(shù)據(jù)處理框架（如Apache Airflow, Kubeflow Pipelines等），該框架在多個典型負(fù)載下的平均處理效率提升了30%以上，同時(shí)將因數(shù)據(jù)異常或系統(tǒng)故障導(dǎo)致的作業(yè)失敗率降低了一個數(shù)量級。

此次獲獎，是交大電院數(shù)據(jù)驅(qū)動軟件技術(shù)實(shí)驗(yàn)室長期致力于數(shù)據(jù)管理與軟件工程交叉研究的結(jié)晶。實(shí)驗(yàn)室負(fù)責(zé)人表示，未來團(tuán)隊(duì)將繼續(xù)深化在“數(shù)據(jù)驅(qū)動”和“軟件定義”方向上的探索，推動數(shù)據(jù)處理技術(shù)更好地服務(wù)于人工智能、科學(xué)計(jì)算、工業(yè)互聯(lián)網(wǎng)等國家重大戰(zhàn)略需求領(lǐng)域，為構(gòu)建高效、可靠、智能的新型軟件基礎(chǔ)設(shè)施貢獻(xiàn)力量。

ICDE 2023最佳論文獎的獲得，再次向國際學(xué)術(shù)界展示了中國在數(shù)據(jù)工程與軟件技術(shù)領(lǐng)域的強(qiáng)大科研實(shí)力與創(chuàng)新能力，對于提升我國在該領(lǐng)域的國際學(xué)術(shù)影響力具有積極意義。