個人資料
  • 博客訪問:
博文
(2024-04-04 21:27:17)
ChatGPT引發的革命性創新來自於Google的Transformerarchitecturelargelanguagemodel.其革命性來源於一個嶄新的attentionmodel。現在所有人都轉向transformer的attentionmodel.在這之前,是Recurrentneuralnetworks(RNNs)主導,那麽是誰第一個有了attentionmodel的想法呢,是這位: JakobUszkoreit:畢業於TechnischeUniversitätBerlin,柏林技術大學。沒有PhD學位。在Google做Intern,然後在Google工作時憑直覺覺得attenti...[閱讀全文]
閱讀 ()評論 (4)
(2024-04-04 19:56:18)
ChatGPT引發的革命性創新來自於Google的Transformerarchitecturelargelanguagemodel.其革命性來源於一個嶄新的attentionmodel。現在所有人都轉向transformer的attentionmodel.在這之前,是Recurrentneuralnetworks(RNNs)主導,那麽是誰第一個有了attentionmodel的想法呢,是這位: JakobUszkoreit:畢業於TechnischeUniversitätBerlin,柏林技術大學。沒有PhD學位。在Google做Intern,然後在Google工作時憑直覺覺得attenti...[閱讀全文]
閱讀 ()評論 (0)
(2024-03-27 17:31:16)
二代有兩類,一類是兒子,真二代。另一類是女婿,假二代。 真二代是真裙帶,水平能力沒經過檢驗,但真二代都有免死金牌,在你眼裏都是成功人士。 女婿之類的假二代,應該是有相當能力和水平的,否則如何得到女二代的垂青。但是他們的裙帶是易斷的,很多人結局很慘。 王岐山曾經是總書記呼聲最高,被認為是能人幹將,救火隊長,因為是個女婿偽二代被否決[閱讀全文]
閱讀 ()評論 (0)
上一貼,引發不少爭議甚至誤解。我的初衷是不同意很多人這個觀點:“每個大學CS教的都一樣,所以上哪個都一樣”。 從上一貼看出,同樣CS本科畢業,學的東西差別巨大。你可以爭論學的越多就越蠢,但學的內容不一樣是事實。 我查了一下,CMU提供的有關ML的課程非常多,而且是不同係科提供,有計算機係的十幾門課,人工智能係的十幾門,機器學習係的二十幾[閱讀全文]
閱讀 ()評論 (4)
(2024-03-25 14:58:23)
上一貼,引發不少爭議甚至誤解。我的初衷是不同意很多人這個觀點:“每個大學CS教的都一樣,所以上哪個都一樣”。 從上一貼看出,同樣CS本科畢業,學的東西差別巨大。你可以爭論學的越多就越蠢,但學的內容不一樣是事實。 我查了一下,CMU提供的有關ML的課程非常多,而且是不同係科提供,有計算機係的十幾門課,人工智能係的十幾門,機器學習係的二十幾[閱讀全文]
閱讀 ()評論 (0)
(2024-03-24 21:33:51)
課程取自yale和CMU的兩位畢業生https://www.youtube.com/watch?v=zPJrRAHiH4w和https://fanpu.io/courses/,他們大學四年的課程。(CMU那位第5年課程沒計入)。毫無疑問,CMU在rigor上要超過Yale,特別是在system課程方麵,CMU非常吃重,其中OS,Compiler,和CloudComputing,每周都得花超過25小時,Yale畢業基本不需要什麽專業課,也沒有什麽難的課。CMU的SCS要求三門物理化學課,但是可以用APPhysicsC(MandEM)和C[閱讀全文]
閱讀 ()評論 (0)
(2024-03-24 18:38:26)
對於大多數人來講,第一個工作特別重要,基本劃定人生。(雖然我們第一代移民大部分不是這樣) 即使找了CS工作,具體工作也很重要,聽說上海灘的丈母娘招女婿,隻招寫Python的,而寫Java的一律不要。 做了計算機,千萬不要去搞什麽前端,什麽mobileapp,應該多注意算法,還有ML 在CMU,起碼有三班學生在學ML,一類是AI專業的,一類是CS專業的,還有一類是統計專業的[閱讀全文]
閱讀 ()評論 (0)

CSRankings排名: 看前麵大家討論為什麽M,S,B被公認CS頂尖學校,但CSRankings排名不高,分別是第5,9,7。因此有人說MSB沒那麽好,有人說CSRankings排名高的學校沒那麽好。 我看了一下CSRankings.org,給出了如下解釋,歡迎批評。 為什麽M,S,B被公認CS頂尖學校?我覺得首先是曆史性的reputation和bandrecognition,這點可以從CSRankings得到佐證,看2000年至2010年,對所有科目的排名,C[閱讀全文]
閱讀 ()評論 (0)
我小孩上大學的時候,很多人介紹經驗說,隨便買個電腦都可以。不過我們還是買了高配,既有desktopwindows,又有16寸MacBook最高配置,外加微軟surfacepro,和ipadpro。 現在遇到了問題了,做ML和deeplearning的projects,做不動。不管是desktopwindows還是MacBook都奇慢,還出錯。因為巨大數據,加上tensorflow,tensorboard,pytorch,wandb,等等,一會兒memory出錯,一會兒internetconnectioninterrupted,其實都是因[閱讀全文]
閱讀 ()評論 (0)
上來瞅了一眼,看見有人說: “當年拿了一堆CS強校錄取,包括本州的UCLA,家裏花了大價錢選擇CMU,轉了不少AP課,提前畢業家裏蹲” 我的建議就是不管潮起潮落,一定不要遠離海水。如果沒有工作offer時,不妨同時申請MS或者PhD,千萬別閑著,蹲著。好像CMU本科CS的,無條件可以讀MS。 從CMU網站看,Amazon去年2023年招的實習生29名,四年一共122名,略有下降,但真下[閱讀全文]
閱讀 ()評論 (0)
[1]
[2]
[3]
[4]
[5]
[>>]
[首頁]
[尾頁]