作者: LDPC (Channel Coding)
時間: Sat Mar 9 12:24:45 2024
週末有點時間 之前寫的老黃故事 https://disp.cc/ptt/Stock/1aVG4__D
這幾年AI模型突飛猛進的一個關鍵點就是 泛化的能力
簡言之 2018以前 AI模型 都是透過數據 去學習資料上的標註資料
來做人類事先規範好的目的 而機器透過這些標注數據 去達到人類要求的事情
當模型遇到一個沒看過的數據 或者場景變得不同 模型就會失效 甚至無法處理
但在pre-trained model/foundation model出來後 一切都不同了
大體而言就是 模型透過某種學習(self-supervised) 機器能從無註記資料學習一定法則
而能做到超出原本數據沒有做過的事情 這樣以來面對下游任務
只要簡單調整 (zero-shot)不需要重新訓練 或者少量訓練(fine-tuning)
機器就能根據落地場景 能達到最佳化結果
甚至因為self-supervised關係 許多網路上的野生數據 也不需要人工標註
因為機器會在這些大量野生數據 自我學到法則 從而產生推理的效果
而這些最大的意義就是 機器能做到超乎原本數據給的標籤效果 理解數據 創造法則
這些意味者AGI的那個聖杯 有機會可以摸到邊了 而OpenAI最大的概念就是
大力出奇蹟 也就是堆疊數據多樣性(multi-tasking)及 透過龐大算力跟模型
而所達到的模型泛化(zero-shot)以及AGI效果更明顯
甚至有部分人認為GPT-4已經具有AGI效果 https://36kr.com/p/2189496564171137
這種效果也開始在各種領域大放光彩 比方說有人用這些基礎大模型
能成功用大模型搭配基因+身體數據去推測哪種藥物對治療效果有效 甚至更預測出
哪些病情跟基因上的哪些序列有很大相關性 這些都是大模型透過大量數據去學到法則
來推測出哪些藥物對哪些疾病有用 已經在加速醫療領域發展
而大力出奇蹟(Scaling Law)需要的是算力 算力就像是電力 它永遠不嫌多
今年甚至開始有LLM OS跟LLM Agent概念 這些發展都是讓AGI的模型慢慢的變大腦概念
LLM模型具有理解事物能力(Reasoning) 所以可以當做個大腦成為控制介面
所以今年流行LLM OS/LLM Agent 就是讓原本的電子消費系統更為聰明
所以你說AI是泡沫? 我敢打賭 你去問搞AI裡面的人 10個人有10個會說 AI不是泡沫
因為AGI聖杯在我們這一代有機會成真!
這波AI對日常生活影響 可以定調成一種"生產工具"路線發展
AI不會取代人類 但會讓人類生產變高 造成職缺數量下降
比方說以前你需要100個人做的事情 現在一兩個人搭配好用AI工具 就可以達到同樣效果
所有接下來AI落地商業化都是走這種 微軟已經示範了許多可能性
舉個例子
原本影音studio這種需要500~1000人才能做的產業
可能有sora+gpt+audio diffusion(TTS) 只要10個人就可以做出一部電影甚至影集
原本一個漫畫家要五六個助手 現在一個漫畫家只要用adobe firefly做畫圖
就可以達成 而客服產業 原本需要100個人 你現在可能就5個人類manager搭配100個
LLM Agent+TTS就可以達成 甚至當年我們ESPN攝影團隊需要10個人才能轉播球賽
現在只要兩個人+懸臂AI Camera(AI導播) 就可以達到運動產業轉播 以下是個例子
順便給大家看看 以前用數據標注的"舊AI"為何沒辦法處理數據上沒看過 然後失誤
畫面一直追者光頭跑..)
你如果有興趣 Follow 每日最新AI論文 你會發現現在的演算法科技進步速度
是在指數成長 去年初只是單純文字LLM 年底就進化到多媒體LLM(視覺+聲音)
現在進化到要用LLM當成一個大腦媒介 去控制任何設備或者OS
而LLM Agent接下來就是會擴展到自駕和機器人或者家電
那回過頭來NVDA怎抹辦?QQ 就是慢慢加碼 過高不買 狂跌繼續買 等到AGI那天出現時
你就可以用數千張來NVDA和AMD防身 不然就會失業然後被抓去當電池了QQ
※ 引述《blueian (義恩阿庫犽)》之銘言:
: ※ 引述《longkiss0618 (夏夕夏景)》之銘言:
: : https://i.imgur.com/J50txd8.png
: : 本來打電動打到深夜 看到NVDA跟AMD都跳通知出來
: : 就又如前幾天一樣開心地去睡覺了
: : 怎麼一覺醒來兩個都崩了 AMD反跌1.5% NVDA更慘 還跌7%
: : NVDA直接上下崩跌100點 請問發生什麼大事了嗎?
: : 會所按摩的錢一下子就都沒有了
: 就嚇甩磨啊,引發AI的程式單而已,從基本面來看根本長線大多頭起漲點,
: 技術面來看,趨勢沒改變拉回就是加碼,不信? 看看大哥SMCI走勢就很明顯了
: 破千隔天大長黑,結果震盪幾天馬上創高昨天也沒啥回檔,與其看NV不如看SMCI領頭
: 各國散戶都在當恐慌仔,甚至一堆投行機構早被甩下車,整天放利空泡沫
: 要降息要選舉,就問美股怎麼崩
: 批踢踢實業坊(ptt.cc), 來自: 24.4.211.194 (美國)
※ 文章網址: https://www.ptt.cc/bbs/Stock/M.1709958288.A.309.html
※ 編輯: LDPC (24.4.211.194 美國), 03/09/2024 12:28:27
→ leosthanatos: 好 可是我沒錢了 03/09 12:29
推 Afafa : 推 03/09 12:30
推 leoying : 推一個 03/09 12:30
推 Chrkamp : 每個字我都認得,但.... 03/09 12:30
※ 編輯: LDPC (24.4.211.194 美國), 03/09/2024 12:31:25
→ ethan0419 : cc 03/09 12:31
推 HiHiCano : 好喔 我買台積電 agi出來 下一波還是台積電 03/09 12:31
※ 編輯: LDPC (24.4.211.194 美國), 03/09/2024 12:32:45
→ joygo : agi會拿來當武器啦,你看電影哪一個人工智慧不是拿 03/09 12:31
→ joygo : 來當指揮官 03/09 12:31
推 wju1230 : AI可以解LDPC嗎 03/09 12:32
→ hydra7 : 還好我有ai5…. 03/09 12:33
推 azxswqa : 聽起來蠻泡沫的AI檢測這個作品是否AI 03/09 12:33
推 daocs : 還好我還有英偉達 03/09 12:34
→ ookimoo : 沒那個需求就是泡沫 記住我說的 03/09 12:34
→ alanjiang : 完了要失業惹,那還有啥可買 03/09 12:34
→ ookimoo : 步伐跨得太大 扯到蛋了 03/09 12:35
推 kuominj : 推,加碼AMD 03/09 12:36
推 ppuuppu : 推,每次看你的文章都覺得有些收穫,感謝 03/09 12:36
推 heidilin : 推!快點假裝我有看懂 03/09 12:38
推 gabriel : 原來我還有當電池的潛力 03/09 12:38
推 DarkerDuck : 好文推 03/09 12:39
推 redbeanbread: 還好我有英業達 03/09 12:39
推 w60904max : 我買nvda的原因也是怕之後當電池 03/09 12:40
→ MacD89 : 請問非gpu的客製asic這邊怎麼看?前天brcm財報後崩了 03/09 12:41
推 Colaman : 我覺得很多台灣人不懂或是無法體會或是沒有受到這 03/09 12:41
→ ookimoo : 對各國政府來說 更不需要你說的AGI這種大幅推升 03/09 12:41
→ Colaman : 波生產力革命浪潮衝擊的原因是台灣製造業佔比太高 03/09 12:41
推 howhower : 需求是最不需要擔心的,人類欲望永無止境,需求永 03/09 12:41
→ howhower : 遠填不滿,現在熱了開冷氣,人人比皇帝爽,各位有感 03/09 12:41
→ howhower : 到快樂嗎 03/09 12:41
→ ookimoo : 失業率的東西 03/09 12:41
→ MacD89 : 是嚇甩磨嗎? 03/09 12:41
推 g007 : 簡單來講AI是未來生產的趨勢,那這樣人力都會跑去傳 03/09 12:41
→ g007 : 產嗎?未來科技產業製造端,應該也走AI路線自動派貨 03/09 12:41
→ g007 : 下製程,有問題再通知辦公室工程和設備進現場查看原 03/09 12:41
→ g007 : 因。 03/09 12:41
※ 編輯: LDPC (24.4.211.194 美國), 03/09/2024 12:43:02
推 ufo15526368 : 原po內容外行。 03/09 12:42
→ FISH0225 : sora出來後 所謂的紀錄片會不會摻假? 03/09 12:42
→ ufo15526368 : 可以開始賣股票了,各位 03/09 12:42
推 littlesss : 最後某人女友和ai交往了(誤) 03/09 12:43
→ payneblue : 說外行的 快展現自己內行的言論 03/09 12:43
推 ProTrader : 簡單說 ChatGPT早期就是找人類工讀生標記訓練資料 03/09 12:43
→ nakinight : AI就是取代人類啊 1000人變1人就能做 999人不就失業 03/09 12:43
推 w60904max : 然後我猜越多基礎白領的工作被取代 自動車市場越難 03/09 12:43
→ w60904max : 擴大 計程車行業是方便收納勞動力 政府又能控管的 03/09 12:43
噓 leoloveivy : TLDR 03/09 12:44
→ ProTrader : 公司砸錢讓標記資料量夠大所以訓練出很好效果(當時) 03/09 12:44
推 qwe78971 : 有個問題 跟AMD關聯在哪裡 現在不普遍都CUDA架構嗎 03/09 12:44
→ qwe78971 : 沒遇過幾人用AMD的設備 03/09 12:44
→ ProTrader : AI同業看到真的有效果自然會在AI演算法努力突破 03/09 12:45
→ AndyMAX : 好 我自願當電池 03/09 12:45
※ 編輯: LDPC (24.4.211.194 美國), 03/09/2024 12:45:43
推 bbignose : 小時候看的電影"晶兵總動員"是吧 03/09 12:45
→ ProTrader : 這次的目標就是讓電腦自己能標記沒有人工標記的資料 03/09 12:45
→ payneblue : 能研發出治療癌症的新藥 大概就很屌了 03/09 12:45
→ redbeanbread: 看價錢吧 人力每個地方價格不一樣 03/09 12:46
推 Jerry469 : 好 跌下來就是滿倉幹入! 03/09 12:46
→ ProTrader : 讓電腦看懂無人標記的資料 目前已經確認有可行性 03/09 12:46
→ ccy858 : 哥 可以講人話嗎… 03/09 12:47
推 renfro928 : 推 03/09 12:47
推 allen0080 : 比只會靠北漲跌的廢文強一兆倍! 03/09 12:47
→ ProTrader : 所以未來AI同業會更努力砸錢把AI強化成AGI 03/09 12:48
→ ProTrader : 想想谷哥的AlphaGo 最早也是要用人類棋譜訓練 03/09 12:49
→ ProTrader : 後來就不需要人類棋譜能自行抹擬下棋 自我訓練 03/09 12:50
→ ProTrader : 最後有達成各種棋類遊戲都能自我訓練的程度 03/09 12:51
推 EraKing : 已經準備好電池護身符了 03/09 12:51
推 poeoe : 最直接影響的就碼農和影音創作產業 AI寫程式只會越 03/09 12:52
→ poeoe : 來越強而已 03/09 12:52
→ ProTrader : ChatGPT最早會轟動就相當於早期AlphaGo下贏人類棋士 03/09 12:52
推 zoze : NV&AMD 雙槍 改變世界 03/09 12:53
→ ProTrader : 目前AI巨頭努力要讓AI達到當時下贏李世石的程度 03/09 12:53
推 roseritter : 每個魔術師都想要到達根源 03/09 12:54
→ ProTrader : 而且是要能在各個領域都達到那樣的超強程度 03/09 12:54
→ ProTrader : 當AI達成在各領域都有等同圍棋下贏李世石的程度 03/09 12:56
→ ProTrader : 這就是AI巨頭正式宣布AGI出現在人類世界的時候 03/09 12:57
→ ProTrader : 目前AI公司的做法是讓AI去考試 律師醫師會計師之類 03/09 12:58
推 roseritter : 如此一來 擁有較其他/國家or公司 更強大的AGI 03/09 12:58
→ ProTrader : 先讓AI能在考試贏過各種人類精英 03/09 12:59
→ roseritter : 更有掌握先機 走在技術尖端 或是發動戰爭/商戰 03/09 12:59
→ ProTrader : 先考試能贏接著就是挑戰各行各業365行 行行當狀元 03/09 13:00
→ ProTrader : 黃仁勳已經提出"主權AI算力"把AI上升到國家層次 03/09 13:02
→ ProTrader : 不過他現在說的算力是類似比特幣時期的電腦效能 03/09 13:03
推 onstar : 難怪之前新聞說要找一堆人在那邊下標籤 03/09 13:03
→ ProTrader : 我相信在未來5年最慢10年內"主權AGI能力"就會提出 03/09 13:04
→ onstar : 這樣過十年唸理工也不熱門了,除非是萬中無一的人才 03/09 13:05
→ onstar : 一些簡單到中階的理工工作也會消失 03/09 13:06
推 ae8450 : 有料~推推 03/09 13:06
→ ProTrader : 目前各AI公司應該都在努力集氣能放大絕說達成"AGI" 03/09 13:06
推 moike22 : 這篇有料 03/09 13:07
→ ProTrader : 看不董原po內文不重要 重點是強AI 通用AI是可行的 03/09 13:08
→ paimin : 覺得講的很對 還好我比AI便宜 淘汰不到我 03/09 13:09
→ ProTrader : 現在OpenAI已經說明砸錢搶人搶設備搶晶片是有用的 03/09 13:09
→ ProTrader : 所以現在正是大家搶人搶設備搶晶片別怕AI變空頭 03/09 13:10
推 lavign : zero-shot是零樣本提示不是泛化… 03/09 13:10
我意思是泛化才能有zero-shot或只用少量數據特制化下游任務啊啊
pre-trained model都是用zero-shot來衡量效能指標啊 clip就是經典代表作阿
QQ 不過我調整一下內容 避免誤導
※ 編輯: LDPC (24.4.211.194 美國), 03/09/2024 13:13:17
→ ProTrader : 現在還是能跟AI拼便宜的時期 未來AI會跟人拼便宜 03/09 13:11
推 m840509 : 推趨勢理解政權正確 03/09 13:12
→ ProTrader : 到那時候才是人類真正要大量失業淘汰的時候 03/09 13:12
→ ProTrader : 現在AI在語言文字圖片影音上做出度效果只能說是前菜 03/09 13:13
推 elliotpepe : all in啦 03/09 13:13
推 j8630222 : 工作不會消失但會大減員 像客服 這兩年還有人在說聊 03/09 13:14
→ j8630222 : 天機器人無法處理複雜疑問 但到今天 AI已經可以精準 03/09 13:14
→ j8630222 : 分析語意及發言者的情緒感受 然後給予良好回應 這種 03/09 13:14
→ j8630222 : 情況下只要能實際運用 客服以後留審查人員即可 03/09 13:14
推 afflic : 不會失業啦 當年工業革命 也一堆人怕失業 03/09 13:14
→ afflic : 只會有其他新興產業出現 03/09 13:14
→ ProTrader : 重點在於說明電影中的那種AI是有生產可行性的 03/09 13:14
推 jack0216 : 怎麼跟之前吹航海王一樣 03/09 13:15
※ 編輯: LDPC (24.4.211.194 美國), 03/09/2024 13:16:55
→ ProTrader : 未來人類應該要想辦法跟AI合作用來提升自己 03/09 13:16
→ ProTrader : 要想想如何人機協作而不是完全自動化而被淘汰 03/09 13:17
推 roseritter : 推ProTrader的看法 非數位原住民大概沒戲 03/09 13:18
→ roseritter : google很久很久以前推出九宮格 標路標或車子就是 03/09 13:19
→ roseritter : 在標記 靠 好久以前惹 人為了證明自己不是機器 免 03/09 13:19
→ roseritter : 費打工久矣 03/09 13:19
推 kunyi : 當局者迷 03/09 13:22
QQ萬一錯了 我已經準備好回高雄去台積電顧機台 嗚嗚嗚嗚
※ 編輯: LDPC (24.4.211.194 美國), 03/09/2024 13:24:06
推 sy2es6404 : 感謝科普 03/09 13:28
→ sy2es6404 : https://i.imgur.com/CJs30Vi.gif 03/09 13:29
推 stosto : 其實在deep mining搞定圍棋後,AI就大不同了 03/09 13:29
→ stosto : 一切的一切都是從以前大家覺得爛的NN到前陣子的CNN 03/09 13:30
→ stosto : 時間大概在2016就不同了 03/09 13:30
推 ggirls : 很棒。但下次結論寫在第一行,不然我很挫折。 03/09 13:30
推 ups : 優質好文 03/09 13:32
推 OppOops : 你說的都合理 但是市場主力不是ai 03/09 13:35
→ OppOops : 要ai技術大進步 仍需要時間 這波漲太快 03/09 13:36
推 ProTrader : CNN模型論文在2005前後發表 這時完全沒人關注 03/09 13:41
→ ProTrader : 然後在2010開始在影像辨識領域比賽奪冠拉開差距 03/09 13:42
→ ProTrader : 被市場大家都知道是在谷歌AlphaGo之後 03/09 13:42
→ ProTrader : 原po願意去台積電的話可以當智慧製造工程師 03/09 13:43
→ paul10404 : 講這麼多不如來個對帳單清楚明瞭 03/09 13:43
→ ProTrader : 研發好的產線AI 讓台積電產線人員輕鬆顧機台 03/09 13:44
→ ookimoo : 影像辨識+機器人視覺發展很久了啦 實際上買單的很少 03/09 13:46
→ ookimoo : 講的好像別人都不懂也是很奇怪 03/09 13:46
推 tonylolz : AI不會泡沫 但股票會 03/09 13:51
推 ImHoluCan : 台積電說白的產線和傳產沒什兩樣,本來就可以大數 03/09 13:51
→ ImHoluCan : 據去分析,或者模擬企劃實驗,甚至公司上下運作自 03/09 13:51
→ ImHoluCan : 動引導,本來就做的到的東西,人員只要選擇決定 03/09 13:51
推 Xyla : 你認真了,這邊的人只想看數字溫存 03/09 13:52
https://reurl.cc/lgj4oA
沒有留言:
張貼留言