Can artificial intelligence clear the game 2048?【Reinforcement Learning】

[@burned_tofu]

動かし方を強化学習させるんじゃなくて、適当な動かし方をするbotに対してどこに2,4を召喚したらいいスコアになるかを学習させたら、めっちゃ快適な2048をさせてくれるゲームになりそう

[@cokyoum00]

まじでやって欲しい

[@ミニドラ-h6p]

その発想頭いい

[@HideyukiWatanabe]

接待2048作り!

[@zap_sfan]

上司にやらせる

[@user-u4_0051]

LoveTetrisみたいなもんか……

[@kapananerapa215]

左下のAIくんは1番初めから高得点を取っていたので左下推しだったのですが、最後の最後でついに左下のAIくんがクリア出来てて嬉しかったです。

[@ariadaitai2368]

一時期ハマってたゲームだ！！

[@citY_special_]

誰もが一時期ハマるゲーム

[@user-Duraludon]

みんな最高スコアどのくらいですかぁ〜？
ちなみに僕は36448です

[@オオたき]

@@user-Duraludon
そんな数字出てくる？

[@gen-jw6pt]

ちゃんと右上から下に下まで行ったら次の段の下から上に数字を並べていけてるところがすごい！

[@満宮]

左下の子推しだったから1番最初に成功してくれて嬉しい

[@nitrobugging]

なんだかんだ2048に到達する人工知能もすごいけど、ルールを聞けば100回掛からずに2048に到達してしまう人間の学習能力もある意味すごい

[@tarouyakisoba2808]

まず、このゲームを自作したことがすごい

[@どっかの里]

人間もAIもいきなり難しいことはできない
考え方を変えるだけで飛躍的に成長する

[@umyy3602]

5年前くらいにハマってたなー。1年に1回くらい新記録が出るとテンション上がってた。
今乗ってるクルマに標準装備されててついやってしまう…

[@buddhagautama673]

クルマに標準装備...？

[@umyy3602]

@@buddhagautama673 テスラの充電中にやったりしてます。

[@Sotetsu21108f]

@@umyy3602 中央道大月付近を走行中にやったりしてます。
「おい前見ろ！前！」がしゃーん

[@Pippi12]

短期的には報酬増えないけど長期的にみたら報酬がめちゃくちゃ増えるみたいな、いわゆる数手先を読ませる学習が必要だから大変そう

[@ああ-q7b8y]

AIって飴と鞭で躾けるんだね、、

[@しょんぼり-o8u]

いつも楽しく拝見してます
報酬と罰のルールで全然違う挙動するの凄いですよね
・マージの度にマージ結果の数字の半分報酬
・移動の度に残りマスの個数分罰
とかなら積極的にマスを減らそうとしてくれる気がしました◎

[@かざみん-p6k]

2048は「この動画みたいな強化学習を実行した際およそ2048回に一回クリアできるようなAIができる」ということを念頭に作られたのでは（？）

[@-nishihayata-2647]

AI学習お疲れさまでしたー！！
すごいなぁニューラルネットワーク先輩

[@Marionetto0207]

最近強化学習系で動画上げてますが少し前にやってた気になる物の構造についてリクエストします
刑事ドラマと言えばで出てくるブラインドですが
あれを実際に触ってみると、紐を引っ張るとブラインドを巻き上げたり一気に下ろしたり、棒を捻ったりすると光の入り具合を調節したりと色々出来ているのでその仕組みがすごく気になります

[@unkomen76]

右に寄せるだけじゃなくて右下に寄せれば4096も割と難しくなくできるよ

[@manbodama]

それを教えることはできんからなぁ

[@怪獣LOLUU]

それを教えるのは趣旨が違うでしょw

[@aliciawlc.5916]

解法が分かった上でこーじさんにもう一回自力で2048達成してみて欲しい

[@tn-vz7er]

探索アルゴリズムと組み合わせると，もっと良くなりそう

[@hutoukou2003]

このチャンネルでこのゲームしって、2048インストールしたわ

[@user-xz5si2of4m]

マヨネーズを絞り出すと螺旋状に射出される理由を検証してみてください

[@kyokonoohana]

これ3年前なのえぐい

[@はやさか-q3t]

最大値を右下に集めている時に上に動かさないといけなくなった時に右下に2が出た時の絶望感は異常

[@ハヒフヘホ-i9o]

1番大きい数を4つ角のどこかに置いている時に+を与えて2番目に大きい数を1番大きい数に隣接さていると+を与えたらもうちょっと早く出来そう

[@tenkun-xx2py]

登録者数33.3万人おめ！

[@jy-xm7ig]

AIにルービックキューブをやらせて欲しいです

[@さるるんの部屋]

いまだに時々ブラウザでちょっと開いてピコピコするw

[@マリモ-n5l]

今までの経験上4方向のどれかひとつを封印してどうしてもそのひとつしか動かせない時に動かすと上手くいく

[@dowadowa1024]

慣れれば2048くらいは簡単に作れるから人間ってすごいんだなって

[@gashoutbertoran1121]

やっぱりこのゲーム凄い難しいんだなあ。
偶然クリアできる可能性はほぼほぼ0なんやな。

[@taiten0807]

解法知って慣れれば多少運はあれど人に2048はかんたんなのに機械に教えるのって大変なんだな

[@sea983]

チャンネル登録通知しています
面白い動画ありがとうございます
最近自分もunity使い始めました
強化学習方法教えてほしいです

[@wogikaze_sub]

どうやってコード書いてるか気になりますよね

[@sea983]

@@wogikaze_sub ですよね

[@Dモーガン]

4:40
\( ´ω` )/「クリアだよ~」

[@hosinonanako]

初回が512だったけど半日で1024達成。その後半日周期で2048/4096/8192となった。
100000点超えは折り返しの工夫がぷよぷよのGTRみたいな感じ。
慣れれば案外簡単になる。
点数表示のある終了時の動画も入れておくよ。

[@ふわふわうさぎ毎日投稿]

動画見ました

[@minoslime5776]

場面上の数字÷数の密度を報酬にしてもいいかも

[@aribon715]

へ〜、こういう感じで強化していくのか

[@cyan4454]

2000回でクリアすごいな。人間でも100回近くやらないとクリア出来ない人も少なくないだろうに

[@雷魔王-e2l]

お久しぶりです

[@はすみ-u1b]

すごい！！ 左下の子をベースに、どこまでいけるかやってみてほしいです

[@fall-of-leaf0707]

全力でやって256が限界だったんだが…(涙目)
追記
512いけた~！

[@ウルトラフォレストのかみつかい]

なるべく大きな数字を角に置いて動かさない、その隣に2番目に大きい数字、さらにその隣に……という定石をつかってる？
それ使えば2048は割と簡単に行けるよ
俺は右下に固定する派だけど、上に動かさざるを得ない状況にならないようにだけ気をつけておけばいい。

[@fall-of-leaf0707]

動画開いたら過去の自分のコメントがあったので、2年越しに1発やってみました
28000点でした

[@tmkz-x1e]

これの論文まであるんですね…
そんなに難しいゲームだったのか

[@ウルトラフォレストのかみつかい]

初めてやった時から1024を作れたし、今は10回中9回は4096を作れるレベルまで極めてるけど、16384を作るのはかなり難しい。
右下に一番大きい数字を固定して、その隣に次に大きい数字、その隣に3番目に大きい数字……と置いて一番下の列はなるべく固定するのと、どうしても上に動かさざるを得ない状況にならないように気をつけるのがコツかな。繰り返しやってたら、右下にノイズが入っても修正する方法がなんとなくわかってくる。

[@hiehie1004]

普通にモンテカルロ探索やらせれば強そうな気がするけど

[@n-yan670]

いつも思うんだけど、ＡＩに与える罰って何なんだろう？「お前なんかＦＭ－8(大昔のpc)並みじゃ！」とか罵声浴びせるんかな？w

[@lol-xn9oo]

成績表を1にするだけやで

[@KenichiKuninaka]

これ普通に動く方向を３通りに絞れば基本的に簡単にクリアできる

[@ymd3926]

一手戻るを使って2が出るか4が出るかを自由に選べるようにしたら理論値上限行けた
3日かかった

[@ねるねるねるね-v6g]

2048に似てるけどスリーズってゲームがあってそれも面白いからやってほしい

[@kuwakuwa2060]

ゲームによっては2048の先が出来ます。私は8192が限界。5桁行かなかったなぁ。

[@鉛澤葉獅]

一時期めちゃくちゃハマったなぁ。
1024まではいけてたけど結局クリアはできなかった。

[@ふぁんたおれんじ-w9b]

これを人間は１０回もすれば見出すんだから、すごいよね

[@Everredphd]

2より4は報酬的には倍だけど、マス目としては倍じゃないから、ワンホットベクター化してるのかな？

[@にょーん-e6d]

このような機械学習は何のサイトでやっているんですか？

[@user-aruneisu]

下左下左下左・・・止まったら1回だけ右おして下左下左下・・・で良いよねこのゲーム

[@クレいん]

報酬と罰逆にしたらどうなるんだろう…

[@yukkuri-kobutsushou-channel]

相変わらずルールがよく分からないが、クリアしたAIさんはすごい！！

[@siesta8624]

AIなら自分のハイスコア超えてくれると思ってたけどまだまだだな！

[@gerhard7153]

上、右、下、左とぐるぐるやってるだけでも結構いいところまで行けるんだよなぁこのゲーム
まあうまい人がまじめにやったほうが高得点は出るんだけれども。

[@pori_game_]

4096までしか行けませんでした...
スコアもこれで77228で、さらに上もいるのでどうやってるのか気になります

[@芈-s5m]

隙自語きめぇ😊

[@manbodama]

@@芈-s5m 消すなら今のうちやで。今ならまだ間に合う。

[@芈-s5m]

@@manbodama おう、自分語りキッズ消してくるわ！背中押してくれてありがとな！

[@ミンミン-c8g]

似たやつで東京ツクールはやってた

[@はやしたけし-c7y]

次は100%を...

[@namenick2858]

操作をランダムにすればいつかはクリアできる
なお時間は保証されない模様

[@wakame-1919]

5ｘ5にすると2048クリアの確率が上がると思われる（笑）

[@Sotetsu21108f]

確かにおっしゃる通りだと思いますよ！
1辺の大きさは2の冪乗の方が見栄えがいいと思いますが。

[@だれのチャンネル]

やり込んでたら二度2048行けました！（自慢）

[@lol-xn9oo]

2048到達ってチュートリアルじゃね？

[@名城葵]

3年を経てチュートリアル完了？

[@user-sv9wkwktktk]

長いチュートリアルだなぁ

[@otyonnn1191]

機械学習はPythonで作ってるのかな？

[@くろぽち]

最高15000くらいだったけどコツをググッたら一日で59000くらいになった思い出

[@Aramakyi_]

AI君は8192までいける、かな？
16384作ろうとしたら低次ブロックに邪魔されて寸前のところで終わった苦い思い出が…

[@-puddingalacremepatissiere8701]

2^17〜2^2までの数を作れるようになるにはどれくらいの時間がかかるんだろうか？

[@僕の事を忘れないで下さい]

箱の中に100粒以上の豆が入っている状況。
形状、重さがほぼ同じの豆を一発で100粒図る方法はありますか？

[@ryon.2739]

空白が多いほど報酬が出るようにすれば無駄な数字を残さなくなりそう

[@flowerflower3437]

一番大きい数字が角以外にあると微小罰とか考えたけど、それだと恣意的だからレギュレーション違反だろうし何よりつまらないか

[@Masin_Anything]

囲碁AI作ってほしいです！

[@ovationmtsd2770]

角に寄せるのがコツ

[@katsuk6295]

クリアを設定しなかったらいつか65536までたどり着きそう
↓ネタバレ注意
まあ今回の個体はとても時間が掛かりそうだけど

[@本物で草-b6l]

2048っていい塩梅なんだ

[@pc1724d]

できるだけスコアを出さずにもしくは最短で2048とかそれ以上出すゲームだと思ってたんすけど

[@イーソー君]

これで理論値出してる人いた気がする

[@すいか-h8z]

強化学習vs右下アルゴリズム　どっちが強いんや？

[@AtGA13]

右、下、右、下を繰り返して詰まったら左
以下繰り返し

[@認確_プロキオン推し]

最高スコアは103072ですね

[@アルト-b7w]

こーじさんの動画で8かけ8の2048を死ぬまでやろうとして始めましたが詰みました。
全く終わりません。責任取って貰えますか？

[@裏起毛バレルレベル]

う～ん2**16を見に来たんだが、AIになにもついていけてない者だが、AIってのは
こんな条件Aを与えて試行したらこんな結論Bに到達できる確率がn%のAIだよ～って感じなのかな
2048みたいなゲームは（コストをかけた分だけは）、ひたすらハイスコアを追求し続けられるものだと思ってた

[@wimper4591]

たった今google でやってたゲームや....こわｇ....（ガチ）

[@アルミ缶-e3d]

クリアしたことはあるけど
難しいよね

[@ddskec772]

再生回数、高評価、コメント数、チャンネル登録者数を報酬に設定して色んな動画作ってyoutubeに上げるAI作ればいいんじゃないかな。

[@yoshi-qk9jc]

色んな動画作ってって段階だけ難易度爆上がりで草

[@ddskec772]

@@yoshi-qk9jc 最初から人が出来る事全てではなく、かなり限定した例えばゲーム実況とかで、乱数で操作して大体の録画時間は決めておいて、
実況者のリアクションもある程度テンプレを用意して乱数でやって報酬が良かったものを増やしていけば良いし。知らんけどw

[@earthquakequagsire]

2048の論文は草

[@イーソー君]

論文なんてそんなもんやで

[@earthquakequagsire]

@@イーソー君 この前検索したらヒットアンドブローの論文もあったわ
おもしれ

[@ユシケ-y6v]

これ見れば上手くなりそう

[@wiifit902]

2048になった瞬間罰を与えてみたい

[@三世ミルクレープ]

初見で2048に到達した自分は天才だな

[@Heavy-YouTuser]

ス コ ア だ よ ～

[@jun1nakajima01]

主が量子コンピュータ使ったら、どうでもいいユーチューブのネタの世界が変わるかもなー　...ｗ

[@竹光菊池]

これならまだモンテカルロ法のがクリア率高い
時間かかるけど
ぜひもっとうまいAIを作って作り方公開してほしい

[@surahotokeyakke]

これ、報酬と罰を逆にしたら最弱AIができるのでは？

[@阿修羅ガジュマル]

ぶっちゃけ2048は簡単だった。まぁ、2と4どっちが出るか分からないし、運ゲーなところはあるけど、まだ行ける難易度。4096は無理。ワールドランキング見てるとえぐいスコアだけど、やっぱ世界って凄いと思う

[@ybk1940]

数字を大きい順に蛇行するように並べればそんなに難しくない

[@kaztom_ym-ch3]

右上に大きい数字を集めるというのは、数字が大きくなるほど他の数字とくっつけられないので障害物となるから、なんだという事をやりながら理解した。
右上に限らず、一番大きい数字を四隅のどこかに置ければクリアは容易。

[@あんバタートース党]

己の字型でいくか
凹の字型でいくか
操作ミスで落ちなければまあまぁいく

[@グラードン]

俺スコア六万が限界だった………
10万とか行く人すごいよね

[@NatureJapan3776]

このゲームやったことない...

[@Satoru3344]

東京ツクールってアプリで似たことやってたけど、2048意外と面白いよなぁ
動画見て、2048をダウンロードして2回目で2048いけたワイを褒めとくレェ

[@kahori1214]

2146回で1回の成功だと、うっかり偶然できただけ、という可能性があり、まったくランダムにやったときに成功するのと価値の差がない。
せめて1万回くらいで5回くらい成功くらいまでやらないと。

[@xloxy-0]

2048 AI ってサイトあるでー

[@ケリーたもつ]

最近学校でiPad配られて、授業中このゲームしてみんなで競ってるww友達20000行ってたw

[@竹森弘斗]

8000までいった！

[@AAA8888-j6v]

スコアだよ〜