[問卦] 評估後,該怎麼改善這個深度學習模型?
好不容易建構好幾個深度學習模型,
依照專案的安排,
把整理好的dataset拿來跑實驗,
評估模型好壞,
其中一個評估是採用ROC curve,
和計算出AUC數值.
結果讓我不知所措.
https://reurl.cc/Ge4X2Z
這個實驗室是由四個模型跑出來的,
可以分成兩類模型,
倆倆的深度學習架構相似.
但是如同右上角,
不知為何會突然掉到參考線之下,
而且這四個模型跑出來的右上角結果都類似.
第一次遇到這種情形,
上網怎麼都找不到能解釋這種情況,
也不知該怎麼描述這個現象和提出問題?
百思不得其解.
請問這個評估結果是代表什麼意思?
該怎麼改善這個深度學習模型?
有掛嗎?
--
※ PTT 留言評論
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 153.231.83.220 (日本)
※ PTT 網址
※ 編輯: IntelNNP (153.231.83.220 日本), 03/14/2023 20:01:42
推
掛科的掛
推
我想的跟chatGPT一樣
推
問chatgpt
→
蛤,就特徵怎麼看都不像答案的離群値啊
→
直接問chatgpt,他有經驗
→
這個問題該怎麼問?
71
Re: [閒聊] AI畫圖是不是大數據拼圖?只要是深度學習AI,原理都是把圖轉換成矩陣,通過神經網路作back propogation學習特 徵,在整個模型的運算過程中只有矩陣,不存在任何圖像拼接的過程 你認為圖很像,是因為那個tag底下的圖大多有類似特徵,模型通過矩陣學習到這個特徵 當然,也有一些generator的算法是會拿部分來源當輸出,不通過矩陣運算的,怎麼選也 是讓模型自己學,類似概念可以參考pointer network或residual network之類的算法40
Re: [外絮] 用機器學習模型預測MVP得主大略看了一下原文 提供我的一點淺見 首先 使用機器學習處理問題 是假設實際存在一個真實的模型16
[請益] 深度學習選股問題問題:不知道版上有沒有人使用深度學習選股? 除了把資料分成測試集跟訓練集, 還有什麼方法可以用來確定深度學習的結果是否真的可以使用? 最近用深度學習跑出一個模型 把財報餵給電腦,讓電腦自行去尋找模型3
[討論] AI工程師訓練Model時在公司做什麼?先說這篇沒有別的意思,只是我個人很好奇,當AI工程師設計好深度學習網路架構,開始 進行訓練的時候,有做過深度學習的人都知道,接下來就是等待結果,不過這個時間跟cp u,gpu,模型複雜度,train data數量等有著很大的關係,所以我想問這段時間AI工程師在 公司裡面幹嘛啊?看著數據跑嗎?還是都是下班前開始跑,隔天早上看結果? 之前唸研 究所的時候,還能跟教授說還在Model還在訓練,然後就跑回家睡覺,在公司應該不可能12
[請益] 為什麼現在新的深度學習模型都很少割出te"為什麼現在新的深度學習模型都很少割出test dataset?" 在進行實驗的時候, 發現近三年來的研究工作, 很多都沒有切割test dataset, 論文裡也沒有列出test dataset的實驗結果.2
[問卦] 為什麼現在新的深度學習模型都很少割出te"為什麼現在新的深度學習模型都很少割出test dataset?" 在進行實驗的時候, 發現近三年來的研究工作, 很多都沒有切割test dataset, 論文裡也沒有列出test dataset的實驗結果.2
[問卦] model 怎麼 tune是這樣的啦 本人廢物煙酒生 前陣子接手一個學長訓練的深度學習的模型要交計劃 最近期末審查快到了,想說跑起來看一下效果怎麼樣,但學長一直不給人家看 說是之前搞錯 dataset,所以沒辦法直接在需求單位那邊用2
Re: [問卦] AI產出的產品之間有關聯性嗎?: 阿肥碼農阿肥啦!有興趣可以看我在科技版的文章,看一下chatGPT的思維模式綜述。 #1Zxi_nPB (Tech_Job) 基本上,現在的深度學習突破的領域在學術界已經是一兩年前的舊聞了,現在所有的語言 視覺模型最好的成果都是基於Transformers(變形金剛)這個家族爆發性成長的結果。- 看到我以為我跑錯版了,嚇死寶寶, 阿肥我來回答一下啦。 傳統訓練集就是拿來擬合模型參數的,驗證集是拿來做超參估計,然後鐵定要是無偏的樣 本,跟訓練集彼此獨立的。 然後測試集就是最後評估整體模型的,也是要無偏獨立上面兩種。
- 之前研討會好像有討論到,除了使用者以外,公司一定有責任把關所以一定是咎責對象之一 ,而工程師爭議 比較大,AI不是我們寫規則判斷,而是訓練出來,所以中間有錯很難歸咎是哪個人寫的哪 條程式碼,裡面就是黑盒子,所以真的要咎責範圍太大:1. 訓練模型的工程師、2. 資料收 集的工程師、3. 再加上開發模型的作者(通常模型也不是自己開發,而是拿別人/別間單
97
[問卦] 美國洛杉磯大火宛如地獄!爆
[問卦] threads 愛台手燈中國製沒關係70
[問卦] 北檢看到通緝犯說回去時間自定在想啥爆
[問卦] 林秉文藐視司法 則沒被檢察官+媒體罵49
[問卦] 紐西蘭牛乳0關稅 結果跟台灣奶價差不多40
[問卦] 林秉文交保為啥沒有抗告再抗告 羈押再羈36
[問卦] 桃機一航廈濃煙,發生什麼事爆
[問卦] 被通緝怎麼敢用社群29
Re: [新聞] 吳乃仁欠國家1.7億遲不還 黃國昌揭他的76
[問卦] 幹你娘 街口支付變超級爛 要先存五萬元24
[問卦] 李斯寫諫逐客書時他的資料是哪來的?23
Re: [問卦] 國旅全部死光 各位真的OK嗎?爆
[問卦] 北檢聽到林秉文這麼囂張 會不會很不爽26
[問卦] 國旅酒店等級一晚大多要多少30
[爆卦] 綾瀨水泥女高中生殺人案主犯於三年前死亡20
[問卦] 有韓團全部團員都叫的出名字嗎18
[問卦] 真正的台灣在地小吃有啥?19
[問卦] 鄧紫棋是因為不肯愛愛才被甩?17
[問卦] 以前被老師霸凌的經驗34
Re: [問卦] 急!線上等!要家庭革命了28
[問卦] 邱軍要做什麼 才能復出歌壇?18
[問卦] 桃園國際機場奇怪的煙霧瀰漫18
[問卦] 選菲力還是沙朗牛排?幾分熟?11
[問卦] 警消退休金75%>80% 就要跳腳?16
Re: [問卦] 加拿大總理特魯多宣布辭職22
[問卦] 大家覺得是誰給了通緝犯勇氣 臉書發文67
[問卦] 沒人要認真救觀光?13
[問卦] 豆腐三重奏是怎麼輸給麻婆豆腐13
Re: [問卦] 國旅酒店等級一晚大多要多少13
[問卦] 「邊逃亡邊嗆聲」不粗暴的說法?