日本黄色一级经典视频|伊人久久精品视频|亚洲黄色色周成人视频九九九|av免费网址黄色小短片|黄色Av无码亚洲成年人|亚洲1区2区3区无码|真人黄片免费观看|无码一级小说欧美日免费三级|日韩中文字幕91在线看|精品久久久无码中文字幕边打电话

當(dāng)前位置:首頁 > 嵌入式 > 嵌入式分享

在數(shù)據(jù)驅(qū)動的決策與建模中,“異常值”的存在是普遍且棘手的問題——無論是傳感器測量中的突發(fā)干擾、經(jīng)濟數(shù)據(jù)中的極端事件,還是醫(yī)學(xué)實驗中的操作誤差,這些偏離數(shù)據(jù)整體分布的異常值,往往會嚴(yán)重扭曲傳統(tǒng)估計方法(如最小二乘)的結(jié)果,導(dǎo)致模型失去對真實規(guī)律的刻畫能力。M估計(Maximum Likelihood-type Estimator,最大似然型估計)作為穩(wěn)健統(tǒng)計的核心方法之一,通過重構(gòu)估計目標(biāo)函數(shù),實現(xiàn)了對異常值的“自適應(yīng)抑制”,既保留了傳統(tǒng)估計在正常數(shù)據(jù)下的高效性,又能在異常值存在時維持估計的穩(wěn)定性。自1964年Huber提出M估計的統(tǒng)一框架以來,這一方法已從最初的位置參數(shù)估計,拓展至回歸分析、信號處理、計算機視覺等多個領(lǐng)域,成為應(yīng)對“數(shù)據(jù)污染”場景的標(biāo)準(zhǔn)工具。本文將從M估計的核心思想、求解邏輯、跨領(lǐng)域應(yīng)用及發(fā)展挑戰(zhàn)出發(fā),系統(tǒng)闡述其作為穩(wěn)健估計方法的價值與演進,揭示其在復(fù)雜數(shù)據(jù)環(huán)境中的不可替代性。

M估計的核心思想源于對傳統(tǒng)估計方法“異常值敏感性”的突破,其本質(zhì)是通過設(shè)計“穩(wěn)健損失函數(shù)”,替代傳統(tǒng)方法中對異常值過度敏感的目標(biāo)函數(shù)。以最常見的回歸分析為例,傳統(tǒng)最小二乘(LS)通過最小化“殘差平方和”實現(xiàn)參數(shù)估計——殘差越大,對目標(biāo)函數(shù)的貢獻越大,這意味著一個極端異常值(如殘差是正常數(shù)據(jù)的10倍)會產(chǎn)生100倍于正常數(shù)據(jù)的影響,直接主導(dǎo)估計結(jié)果。而M估計的關(guān)鍵創(chuàng)新在于:將目標(biāo)函數(shù)從“殘差平方和”替換為“殘差的穩(wěn)健損失函數(shù)之和”,這種損失函數(shù)的核心特性是“對小殘差(正常數(shù)據(jù))保持近似平方增長,對大殘差(異常值)增長放緩或趨于平緩”,從而自動降低異常值在估計中的權(quán)重。

例如,Huber損失函數(shù)是最經(jīng)典的穩(wěn)健損失函數(shù)之一:當(dāng)殘差絕對值小于某一閾值時,它等同于平方函數(shù)(保證正常數(shù)據(jù)下的估計效率);當(dāng)殘差絕對值超過閾值時,它切換為線性函數(shù)(限制異常值的影響);這種“分段特性”既避免了傳統(tǒng)LS對異常值的過度放大,又不犧牲正常數(shù)據(jù)的擬合精度。另一類常用的Tukey損失函數(shù)則更進一步,當(dāng)殘差超過閾值時,損失函數(shù)值趨于恒定,相當(dāng)于完全“忽略”極端異常值的干擾,適用于異常值比例較高的場景(如污染率超過20%的數(shù)據(jù))。不同的穩(wěn)健損失函數(shù)對應(yīng)不同的“穩(wěn)健性-效率”權(quán)衡:越抑制異常值的損失函數(shù),在無異常值時的估計效率可能越低;反之,越接近平方函數(shù)的損失函數(shù),穩(wěn)健性越弱。這種權(quán)衡特性使M估計能夠根據(jù)數(shù)據(jù)污染程度靈活選擇,適配從“輕微噪聲”到“嚴(yán)重異?!钡母黝悎鼍?。

M估計的求解邏輯區(qū)別于傳統(tǒng)方法的“閉式解”,通常需要通過迭代優(yōu)化逐步逼近最優(yōu)解,其中“迭代加權(quán)最小二乘(IRLS)”是最常用的求解框架,其核心是將M估計轉(zhuǎn)化為一系列加權(quán)最小二乘問題,通過動態(tài)調(diào)整權(quán)重實現(xiàn)穩(wěn)健估計。具體而言,IRLS的求解過程可概括為三個關(guān)鍵步驟:首先,選擇一個初始估計值(通常通過傳統(tǒng)方法如最小二乘或中位數(shù)估計獲得,初始值的合理性直接影響迭代收斂性);其次,根據(jù)當(dāng)前估計值計算每個數(shù)據(jù)點的殘差,并基于穩(wěn)健損失函數(shù)的導(dǎo)數(shù),為每個數(shù)據(jù)點分配一個“穩(wěn)健權(quán)重”——正常數(shù)據(jù)的殘差小,權(quán)重接近1;異常數(shù)據(jù)的殘差大,權(quán)重顯著小于1(甚至趨近于0);最后,以穩(wěn)健權(quán)重為基礎(chǔ),求解加權(quán)最小二乘問題得到新的參數(shù)估計,重復(fù)“計算殘差-更新權(quán)重-求解加權(quán)LS”的過程,直至參數(shù)估計值的變化小于預(yù)設(shè)閾值(如兩次迭代的參數(shù)差異小于10??),即認(rèn)為迭代收斂。

本站聲明: 本文章由作者或相關(guān)機構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點,本站亦不保證或承諾內(nèi)容真實性等。需要轉(zhuǎn)載請聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請及時聯(lián)系本站刪除( 郵箱:macysun@21ic.com )。
換一批
延伸閱讀

特朗普集團近日取消了其新推出的T1智能手機“將在美國制造”的宣傳標(biāo)語,此舉源于外界對這款手機能否以當(dāng)前定價在美國本土生產(chǎn)的質(zhì)疑。

關(guān)鍵字: 特朗普 蘋果 AI

美國總統(tǒng)特朗普在公開場合表示,他已要求蘋果公司CEO蒂姆·庫克停止在印度建廠,矛頭直指該公司生產(chǎn)多元化的計劃。

關(guān)鍵字: 特朗普 蘋果 AI

4月10日消息,據(jù)媒體報道,美國總統(tǒng)特朗普宣布,美國對部分貿(mào)易伙伴暫停90天執(zhí)行新關(guān)稅政策,同時對中國的關(guān)稅提高到125%,該消息公布后蘋果股價飆升了15%。這次反彈使蘋果市值增加了4000多億美元,目前蘋果市值接近3萬...

關(guān)鍵字: 特朗普 AI 人工智能 特斯拉

3月25日消息,據(jù)報道,當(dāng)?shù)貢r間3月20日,美國總統(tǒng)特朗普在社交媒體平臺“真實社交”上發(fā)文寫道:“那些被抓到破壞特斯拉的人,將有很大可能被判入獄長達20年,這包括資助(破壞特斯拉汽車)者,我們正在尋找你?!?/p> 關(guān)鍵字: 特朗普 AI 人工智能 特斯拉

1月22日消息,剛剛,新任美國總統(tǒng)特朗普放出重磅消息,將全力支持美國AI發(fā)展。

關(guān)鍵字: 特朗普 AI 人工智能

特朗普先生有兩件事一定會載入史冊,一個是筑墻,一個是挖坑。在美墨邊境筑墻的口號確保邊境安全,降低因非法移民引起的犯罪率過高問題;在中美科技產(chǎn)業(yè)之間挖坑的口號也是安全,美國企業(yè)不得使用對美國國家安全構(gòu)成威脅的電信設(shè)備,總統(tǒng)...

關(guān)鍵字: 特朗普 孤立主義 科技產(chǎn)業(yè)

據(jù)路透社1月17日消息顯示,知情人士透露,特朗普已通知英特爾、鎧俠在內(nèi)的幾家華為供應(yīng)商,將要撤銷其對華為的出貨的部分許可證,同時將拒絕其他數(shù)十個向華為供貨的申請。據(jù)透露,共有4家公司的8份許可被撤銷。另外,相關(guān)公司收到撤...

關(guān)鍵字: 華為 芯片 特朗普

曾在2018年時被美國總統(tǒng)特朗普稱作“世界第八奇跡”的富士康集團在美國威斯康星州投資建設(shè)的LCD顯示屏工廠項目,如今卻因為富士康將項目大幅縮水并拒絕簽訂新的合同而陷入了僵局。這也導(dǎo)致富士康無法從當(dāng)?shù)卣抢铽@得約40億美...

關(guān)鍵字: 特朗普 富士康

今年5月,因自己發(fā)布的推文被貼上“無確鑿依據(jù)”標(biāo)簽而與推特發(fā)生激烈爭執(zhí)后,美國總統(tǒng)特朗普簽署了一項行政令,下令要求重審《通信規(guī)范法》第230條。

關(guān)鍵字: 谷歌 facebook 特朗普

眾所周知,寄往白宮的所有郵件在到達白宮之前都會在他地進行分類和篩選。9月19日,根據(jù)美國相關(guān)執(zhí)法官員的通報,本周早些時候,執(zhí)法人員截獲了一個寄給特朗普總統(tǒng)的包裹,該包裹內(nèi)包含蓖麻毒蛋白。

關(guān)鍵字: 美國 白宮 特朗普
關(guān)閉