Catch up

 大型語言模型 就像人生出來直接讀博班，嬰兒會的東西反而不會。嬰兒知道洋娃娃被蓋住了並沒有不見，但AI 會以為憑空消失了。

來自ICML2024的論文

https://www.facebook.com/share/p/1EMzRKUrBQ/?mibextid=wwXIfr

How many r in strawberry

How many characters in "sentence"

LLM 把人類知識灌頂給 AI

GPT, Generative, Pre-training, Transformer

如何取出知識

endgame

化繁為簡 思維鏈 (chain of thought)

深謀遠慮 RL(reinforced learning) What is Reinforcement

AlphaGo AlphaZero

pre-training vs. learning

nature vs nurture aspect of snake fear

AGI?

AI 可以靠自己學習，探索，發現新事物嗎？