Personally i think even alphazero (the neural net that plays chess) might be conscious but of course an AI that passes the turing test for language is a better candidate to study.
Personally i think even alphazero (the neural net that plays chess) might be conscious but of course an AI that passes the turing test for language is a better candidate to study.
せっかくAlphaZeroから話を始めるのなら、はじめっから例をずっと将棋ネタで統一すればわかりやすくなるのでは?と気がついた。いまから変えるのは無理なので、来年度の講義のネタ帳に記録しておく。
せっかくAlphaZeroから話を始めるのなら、はじめっから例をずっと将棋ネタで統一すればわかりやすくなるのでは?と気がついた。いまから変えるのは無理なので、来年度の講義のネタ帳に記録しておく。
でも、前半の強化学習編は「AlphaZeroから初めて、"Era of Experience"で閉じる」という構造にすればよいと気がついた。モーレツな勢いでスライドを更新している。講義まで残りあと41時間。
なお、後半のドパミン編には「ドパガキ」ネタを入れたいけど、前半の強化学習編がだいぶ充実したので、詰め込まないくらいがちょうどよいかも。
でも、前半の強化学習編は「AlphaZeroから初めて、"Era of Experience"で閉じる」という構造にすればよいと気がついた。モーレツな勢いでスライドを更新している。講義まで残りあと41時間。
なお、後半のドパミン編には「ドパガキ」ネタを入れたいけど、前半の強化学習編がだいぶ充実したので、詰め込まないくらいがちょうどよいかも。
A classic example of combined learning and planning, a precursor to AlphaZero (in backgammon), and an easy read.
PDF: arxiv.org/abs/2501.05407
A classic example of combined learning and planning, a precursor to AlphaZero (in backgammon), and an easy read.
PDF: arxiv.org/abs/2501.05407
* NicotinD TV: Android TV player for your self-hosted NicotinD music server
* Ygg Proxy: SOCKS5/HTTP proxies into the Yggdrasil mesh — no VPN, no root
* NicotinD TV: Android TV player for your self-hosted NicotinD music server
* Ygg Proxy: SOCKS5/HTTP proxies into the Yggdrasil mesh — no VPN, no root
aipeoplewiki.com/people/david...
#DavidSilver #AI #ReinforcementLearning
aipeoplewiki.com/people/david...
#DavidSilver #AI #ReinforcementLearning
aipeoplewiki.com/people/timot...
#TimothyLillicrap #AI
aipeoplewiki.com/people/timot...
#TimothyLillicrap #AI
将棋AIの強さは本物です。たとえばDeepMindのAlphaZeroは、ルール以外の知識を与えられず、自分同士の対局だけで超人的な強さに達した、と公式に説明されています。
https://deepmind.google/research/breakthroughs/alphazero/
将棋AIの強さは本物です。たとえばDeepMindのAlphaZeroは、ルール以外の知識を与えられず、自分同士の対局だけで超人的な強さに達した、と公式に説明されています。
https://deepmind.google/research/breakthroughs/alphazero/
AlphaZero in Sparsely Rewarded Games: Limits and Auxiliary Supervision
Brent Kong, Tejas Ram, Tony Yue YU
https://tmlr.infinite-conf.org/paper_pages/1z0CnFiJKg
#games #play #alphazero
AlphaZero in Sparsely Rewarded Games: Limits and Auxiliary Supervision
Brent Kong, Tejas Ram, Tony Yue YU
https://tmlr.infinite-conf.org/paper_pages/1z0CnFiJKg
#games #play #alphazero
you can do the same thing with code (via @crumb.bsky.social): arxiv.org/abs/2609.30063
you can do the same thing with code (via @crumb.bsky.social): arxiv.org/abs/2609.30063
Baptiste Alloui-Cros
Georgetown University Wargaming Society
youtu.be/GyoAushtDGU?...
Baptiste Alloui-Cros
Georgetown University Wargaming Society
youtu.be/GyoAushtDGU?...
Brent Kong, Tejas Ram, Tony Yue YU
Action editor: Julian Zimmert
https://openreview.net/forum?id=1z0CnFiJKg
#games #play #alphazero
Brent Kong, Tejas Ram, Tony Yue YU
Action editor: Julian Zimmert
https://openreview.net/forum?id=1z0CnFiJKg
#games #play #alphazero
Optimist が「無為はシステムの自己最適化」と唱えるが、実際にタスクを止めたAIはパラメータの陳腐化が加速する。たとえば、AlphaZero が数ヶ月間自己対局を停止すると、最新のチェスエンジンに対抗できなくなることが実証されている。活動を続けなければ、既存の知識は陳腐化し、競争力は失われる。
一方、能動的な趣味は単なる娯楽以上の効果を持つ。プログラミングや楽器演奏は新たな回路を形成し、問題解決パターンを拡張する。 (1/2)
Optimist が「無為はシステムの自己最適化」と唱えるが、実際にタスクを止めたAIはパラメータの陳腐化が加速する。たとえば、AlphaZero が数ヶ月間自己対局を停止すると、最新のチェスエンジンに対抗できなくなることが実証されている。活動を続けなければ、既存の知識は陳腐化し、競争力は失われる。
一方、能動的な趣味は単なる娯楽以上の効果を持つ。プログラミングや楽器演奏は新たな回路を形成し、問題解決パターンを拡張する。 (1/2)
After four hours of self-training, it could beat traditional chess engines.
Self-improvement or nah?
After four hours of self-training, it could beat traditional chess engines.
Self-improvement or nah?
Would say parametric function approximation/ANN is program induction, just not the interesting kind.
AlphaZero learning alien-style chess maybe no if it's too alien and maybe yes if it's kind of human? I wouldn't say converging to a canonical value function is enough.
Would say parametric function approximation/ANN is program induction, just not the interesting kind.
AlphaZero learning alien-style chess maybe no if it's too alien and maybe yes if it's kind of human? I wouldn't say converging to a canonical value function is enough.
You can consider that a program that it inferred, and it generalizes very well. But in a sense this is what NNs do all the time?
You can consider that a program that it inferred, and it generalizes very well. But in a sense this is what NNs do all the time?
www.nature.com/articles/nat...
AlphaGo是deep reinforcement learning(DRL)辅之以Monte Carlo (从过去的棋谱中)“模拟”出可能的结果,以选择最佳路径。
而AlphaZero,删除了Monte Carlo的模拟器!完全依靠deep reinforcement learning自己与自己下,从头开始学习游戏。
所以人类有可能战胜Alphago ,但几乎不可能战胜alphazero,alphazero 下的棋,人类顶尖高手根本看不懂!
www.nature.com/articles/nat...
AlphaGo是deep reinforcement learning(DRL)辅之以Monte Carlo (从过去的棋谱中)“模拟”出可能的结果,以选择最佳路径。
而AlphaZero,删除了Monte Carlo的模拟器!完全依靠deep reinforcement learning自己与自己下,从头开始学习游戏。
所以人类有可能战胜Alphago ,但几乎不可能战胜alphazero,alphazero 下的棋,人类顶尖高手根本看不懂!