[問卦] 評估後,該怎麼改善這個深度學習模型?
好不容易建構好幾個深度學習模型,
依照專案的安排,
把整理好的dataset拿來跑實驗,
評估模型好壞,
其中一個評估是採用ROC curve,
和計算出AUC數值.
結果讓我不知所措.
https://reurl.cc/Ge4X2Z
這個實驗室是由四個模型跑出來的,
可以分成兩類模型,
倆倆的深度學習架構相似.
但是如同右上角,
不知為何會突然掉到參考線之下,
而且這四個模型跑出來的右上角結果都類似.
第一次遇到這種情形,
上網怎麼都找不到能解釋這種情況,
也不知該怎麼描述這個現象和提出問題?
百思不得其解.
請問這個評估結果是代表什麼意思?
該怎麼改善這個深度學習模型?
有掛嗎?
--
※ PTT留言評論
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 153.231.83.220 (日本)
※ PTT 網址
※ 編輯: IntelNNP (153.231.83.220 日本), 03/14/2023 20:01:42
推
掛科的掛
推
我想的跟chatGPT一樣
推
問chatgpt
→
蛤,就特徵怎麼看都不像答案的離群値啊
→
直接問chatgpt,他有經驗
→
這個問題該怎麼問?
71
Re: [閒聊] AI畫圖是不是大數據拼圖?只要是深度學習AI,原理都是把圖轉換成矩陣,通過神經網路作back propogation學習特 徵,在整個模型的運算過程中只有矩陣,不存在任何圖像拼接的過程 你認為圖很像,是因為那個tag底下的圖大多有類似特徵,模型通過矩陣學習到這個特徵 當然,也有一些generator的算法是會拿部分來源當輸出,不通過矩陣運算的,怎麼選也 是讓模型自己學,類似概念可以參考pointer network或residual network之類的算法40
Re: [外絮] 用機器學習模型預測MVP得主大略看了一下原文 提供我的一點淺見 首先 使用機器學習處理問題 是假設實際存在一個真實的模型16
[請益] 深度學習選股問題問題:不知道版上有沒有人使用深度學習選股? 除了把資料分成測試集跟訓練集, 還有什麼方法可以用來確定深度學習的結果是否真的可以使用? 最近用深度學習跑出一個模型 把財報餵給電腦,讓電腦自行去尋找模型3
[討論] AI工程師訓練Model時在公司做什麼?先說這篇沒有別的意思,只是我個人很好奇,當AI工程師設計好深度學習網路架構,開始 進行訓練的時候,有做過深度學習的人都知道,接下來就是等待結果,不過這個時間跟cp u,gpu,模型複雜度,train data數量等有著很大的關係,所以我想問這段時間AI工程師在 公司裡面幹嘛啊?看著數據跑嗎?還是都是下班前開始跑,隔天早上看結果? 之前唸研 究所的時候,還能跟教授說還在Model還在訓練,然後就跑回家睡覺,在公司應該不可能12
[請益] 為什麼現在新的深度學習模型都很少割出te"為什麼現在新的深度學習模型都很少割出test dataset?" 在進行實驗的時候, 發現近三年來的研究工作, 很多都沒有切割test dataset, 論文裡也沒有列出test dataset的實驗結果.2
[問卦] 為什麼現在新的深度學習模型都很少割出te"為什麼現在新的深度學習模型都很少割出test dataset?" 在進行實驗的時候, 發現近三年來的研究工作, 很多都沒有切割test dataset, 論文裡也沒有列出test dataset的實驗結果.2
[問卦] model 怎麼 tune是這樣的啦 本人廢物煙酒生 前陣子接手一個學長訓練的深度學習的模型要交計劃 最近期末審查快到了,想說跑起來看一下效果怎麼樣,但學長一直不給人家看 說是之前搞錯 dataset,所以沒辦法直接在需求單位那邊用2
Re: [問卦] AI產出的產品之間有關聯性嗎?: 阿肥碼農阿肥啦!有興趣可以看我在科技版的文章,看一下chatGPT的思維模式綜述。 #1Zxi_nPB (Tech_Job) 基本上,現在的深度學習突破的領域在學術界已經是一兩年前的舊聞了,現在所有的語言 視覺模型最好的成果都是基於Transformers(變形金剛)這個家族爆發性成長的結果。- 看到我以為我跑錯版了,嚇死寶寶, 阿肥我來回答一下啦。 傳統訓練集就是拿來擬合模型參數的,驗證集是拿來做超參估計,然後鐵定要是無偏的樣 本,跟訓練集彼此獨立的。 然後測試集就是最後評估整體模型的,也是要無偏獨立上面兩種。
- 之前研討會好像有討論到,除了使用者以外,公司一定有責任把關所以一定是咎責對象之一 ,而工程師爭議 比較大,AI不是我們寫規則判斷,而是訓練出來,所以中間有錯很難歸咎是哪個人寫的哪 條程式碼,裡面就是黑盒子,所以真的要咎責範圍太大:1. 訓練模型的工程師、2. 資料收 集的工程師、3. 再加上開發模型的作者(通常模型也不是自己開發,而是拿別人/別間單
90
[問卦] 統神:當初協議我減到100kg以下 拿16oz打爆
[問卦] 認真文 聽說明天就要起訴了67
[問卦] 昨天那個光頭裁判是什麼洨?51
[問卦] 戈登燙傷處理先沖熱水!?32
[問卦]館長評論統蹦:價碼早就談好了 演的啦43
Re: [新聞] 藍白強行通過3法 台中罷免不適任立委人34
[問卦] 只有我不懂魷魚遊戲哪裡好看?76
[問卦] 統神直播說明有關體重、拳套(懶人包)36
[問卦] 板橋車站周遭蓋一堆豪宅超可惜的八卦???爆
[問卦] 為什麼身份證拿出來國家會滅亡?34
Re: [問卦] 被台派出征的那個梅花糕 有人吃過嗎32
[問卦] 房價這波要跌十趴?甘安捏?31
[問卦] 看過夢幻遊戲都幾歲了??25
[問卦] 林夕 黃偉文 李焯雄 方文山 誰是詞神?69
[問卦] threads上面因為建中放女學生立牌吵翻了24
[問卦] 33K透天無貸和74K無房哪個有安全感55
[問卦] threads:高雄有魷魚遊戲根本首都24
[問卦] 煤油是最屌炸天的暖爐吧23
[問卦] 二十年後很多刺青阿姨嬸嬸?17
[問卦] 筆電用八年了,還可以再戰多久?29
[問卦] 吃過最難吃的名店是哪一家?17
[問卦] 烏龍派出所哪一集最好笑18
[問卦] 滷味是怎麼取代關東煮的?26
[問卦] Tilda 在台灣的照片大家還有臉嗎?69
Re: [新聞] 民眾黨版財劃法遭藍營丟包 黃國昌喊可接37
[問卦] 小鍾:請統粉不要公布我的個資14
[問卦] 台中怎麼一堆人去撞 行人庇護島16
[問卦] 驚!豬油不飽合脂肪有44%13
[問卦] 賣香煙要核准你真的ok嗎15
[問卦] 為什麼8+9都瘦瘦吃不胖的八卦?