Re: [問卦] AI大數據分析是不是過譽了?
※ 引述《lpbrother (LP哥(LP = Love & Peace))》之銘言:
: 之前很多學校就喊說大數據分析怎樣的
: 但事實上目前唯一能夠應用的只有
: google 的搜尋分析
: google 就是分析大家搜尋的關鍵字推送最需要的網頁
: 但除此之外,
: 統計學家長期以來都得承認,
: 最困難的是如何證明兩組不同數據之間取得關聯性,
: 要不然就會鬧出類似
: 男人比出OK的手勢的圓圈大小等於他的睪丸大小
: 這種笑話
: 但是這種笑話一樣的數據分析論文到處都是,
: 根本沒有做到所謂的大數據分析的效果,
: AI大數據分析是不是過譽了?
: 有沒有八卦?
所以任何當前的機器學習模型都需要Data scientist來做前置性分析的啦。明星級的DS多半是數學、統計、計算機科學交叉領域的專家,一個好的模型訓練集跟測試集必然存在獨立同分佈,獨立同分佈是為了確保樣本足夠分散各類均勻又能代表真實分佈,因為分散均勻若模型只看了其中8成比例數據必然能泛化剩下的兩成(這邊必然有數學上的驗證,由於有大量數學引理就不贅述,可以從林軒田老師的基石課去找資源,關鍵字VC generalized bound,進一步去找近年DL的學習性研究PAC-Bayes Bound,還有一個私心推薦寫得很好的Paper: Deep Neural Network Approximation Theory,從Information theory角度切入問題的,可以學到很多。)
剩下就是樣本是否代表真實數據的問題,所以DS必然需要了解客戶所謂的真實數據到底是指什麼,再透過敘述性統計跟假設還有EDA確認學習的範圍。
最後一點針對不同分佈(domain)的學習也是近幾年各學者想攻破的,包含主動學習、元學習、表示學習(是否我們還能再把數據透過自監督抽象化給不同領域的問題)、持續學習,這些都是目前正在研究的方向,期望未來能讓機器有辦法真正舉一反三、看少量的數據
就可以學習、持續性學習而不遺忘。另外,還有一門領域是透過對生物腦的理解試圖建構可以運作的仿生物腦模型,這一些都是近年學術的成果啦。
AI落地的路未來會很長,這是持續一兩個世紀的科學革命,現在只是革命前夕而已,我不後悔作為科學家為人類演化的這一里路貢獻我的人生在研究上啦。我是不相信柏拉圖主義那套哲學思路的,因為當代科學研究更偏向於靈魂可能與心智大腦是同一種表述的,透過基因
即可建構任一的心智生物,那靈魂論就是多餘的了。
--
對 不如直接開發搖光
我覺得賺得到錢比較實際
賺錢跟理想不一定不能全都要啊,不然真的當谷歌嫌錢多養一堆科學家做研究嗎?人家當 然也是再壓寶順便炒新聞衝股價。另外,也是真的在做落地打算,其實未來可以預見台灣 企業數據跟分析被全球化企業霸權掌握的趨勢。
資料科學家+顧問+終端客戶 缺一不可
當然可以兼顧 但台灣很難
原PO就是個低端 別跟他認真
爆
Re: [請益] 有人被拔掉主管職降為工程師還待的下去閒聊一下: 頭銜不是最重要的。工作的內容比較重要。 職稱與權力,不是管理人的武器。。 未來想繼續有機會當主管,面子是最不重要到。 1. 2021年,我去面試一家新創公司。創辦人之一,是早期PC時代,數據機撥接上網時代,的台灣常上新聞的知名公司總經理。5
[討論] 大數據與產業:當電腦科學變成支援知識最近高虹安似乎是台灣政壇的熱門話題,她因為說過自己是大數據專長,我就在想:為何大 數據跟非電腦跟資訊領域扯上關係? 後來在出差期間,跟蜂蜜井的專家聊到室內空氣品質與節能的關係,他們給了一個有趣的連 結:1
Re: [討論] 高虹安是招搖撞騙爬得最快政治人物嗎?...... : 推 ckai1983: 感覺不到資工的專業 11/25 02:31 : 不,還是搞不懂大數據跟資工有什麼關係 : 她男友才比較符合大數據的條件吧 ......
爆
[爆卦] 黃國昌FB爆
[問卦] 有人寄大麻給我 我媽收了 我再退有用嗎爆
[問卦] 收賄有什麼好聽的說法?爆
[爆卦] LIVE 鄭文燦500萬交保 最新進展76
[爆卦] 謝忻到香港用人民幣付錢被港仔痛罵Fuck76
[問卦] 洞庭湖潰堤很嚴重嗎?65
[問卦] 為什麼日本的柏油路品質屌打臺灣?爆
[問卦] 大小姐都不會害怕?爆
Re: [新聞] 快訊/震撼彈!鄭文燦疑涉桃園土地變更弊51
[問卦] Threads上開始無罪推定的卦57
[問卦] 三立發江坤俊洗了快20篇??54
[問卦] 這次會查無不法讓八卦板翻車嗎48
[問卦] Dcard:老公堅持女兒取前女友名?50
[問卦] 黃仁勳能30分鐘籌500萬 現鈔嗎?45
[問卦] 中國人大湖潰堤為啥要用砂石車衝下去填?14
[爆卦] 被報案跟騷流程分享45
[問卦] 為什麼台灣拍不出好看的宮鬥劇?49
[問卦] 收500萬有什麼好聽的說法?46
[問卦] 日本的EVE止痛藥有那麼神奇嗎?42
Re: [新聞] 鄭文燦涉收賄!法院證實「收500萬後1年33
Re: [新聞] 震撼!海基會董事長鄭文燦遭檢調帶回 涉39
[問卦] 插進去再拔出來算性交嗎35
[問卦] 這麼快籌出500萬交保的八卦39
[問卦] 金正男都逃到海外了 金正恩還要追殺他?34
[問卦] 小青鳥在threads被開副本嚕27
[問卦] 為什麼不拆中正紀念堂31
[爆卦] 伊朗新總統 親西方心臟科醫師34
[問卦] 為什麼月老廟通常都很多正妹去拜拜?33
[問卦] 原來收錢後又退回不算$$21
[問卦] 王剛探店這個60歲旗袍老闆娘PR多少?