It was too amazing to let AI learn Super Mario Bros. 1-2【Reinforcement Learning】
Ғылым және технология
過去動画の面白いネタを集めた本を出版しました!
【Amazon】www.amazon.co.jp/dp/404605736X/
Twitter: / physicskj
Instagram: / physicskj
Twitter ID:@PhysicsKJ
【ゲームチャンネル】
/ @ko-ji_vt
【サブチャンネル】
/ @ko-ji2
こーじ公式LINE友達追加はこちら:lin.ee/GG4tG0n
主にタイムラインに緩い動画を不定期で挙げます。
再生リスト
・物理エンジン: • 【物理エンジン】高速移動したらサッカーゴール...
使用ソフト
・Unity(メイン)
・Blender(3Dモデリング)
・Tinkercad(3Dモデリング)
・Mixamo(アニメーション)
・Axis Neuron(モーションキャプチャー)
よく使用させて頂いている音源
MusMus:musmus.main.jp/
Music is VFR:musicisvfr.com/
フリー効果音 On-Jin ~音人~:on-jin.com
効果音ラボ:soundeffect-lab.info/
フリーBGM DOVA-SYNDROME:dova-s.jp/
#物理エンジンこーじ #こーじ
Пікірлер: 462
2:58 しょぼんのアクションしたあとのマリオ
@user-uk5jk8zx9i
3 жыл бұрын
警戒しすぎで草
1-2からワープするのが当たり前になりすぎて、1-3が思い出せない件。
@Shika_no_082
3 жыл бұрын
そして最近のマリオの感覚で木の地面を下から上に行けると思ってしまって落っこちるところまで経験済み
@drr5959
3 жыл бұрын
キノコ足場の空でリフトが左右上下に動いてマリオメーカー3DSで収録されたステージ
観察するような感覚でゲームを見れる唯一のチャンネル
@saitama-1467
3 жыл бұрын
わかりみ
500万ステップ学習後とかの動き、若干TAS感があって好き
6:32 辺りの無駄なジャンプが人間らしくて面白い
しっかりと点を取るために敵同時撃破してるの最高
超魔界村で学習させるのも面白そう!
@user-ml7jt1dc4r
3 жыл бұрын
やってほしいw
@XD-lj5ze
3 жыл бұрын
700万回くらいいるんやない?() お前を消す方法思い出した
@nakawa2088
3 жыл бұрын
ロックマンでボス倒せるか見てみたい
@Tsubac-
3 жыл бұрын
これは見たい!笑
@user-lq7rh2bs1u
3 жыл бұрын
超魔界村を再現させるのがすごく大変そう。
本家と同じく得点の概念も入れてほしい! ・ブロックを壊して得点 ・敵を踏んで得点→連続で踏んだら得点が倍 ・ポールの上にタッチするほど高得点 ・残りタイムで加点 この条件で何点でクリアできるようになるのかが見てみたいです!
学習が進むごとに明らかに効率的になってて見てて気持ちいい
@user-vg7zv4vd5q
7 ай бұрын
M 😊
1-1面の動画はこちら kzread.info/dash/bejne/f2dh2KuhZMuTZ6w.html
@hisa_N_
3 жыл бұрын
見ます
@kohsmm2
3 жыл бұрын
お~
@user-jf9dl5ek3j
3 жыл бұрын
懐かしい
お久しぶりです!AIの強化学習好きです
3:41 そのうちすり抜けそう(小並感)
@user-vz9uk1sd1b
3 жыл бұрын
てー♪
人工知能って自分で判断して学習するのもすごいけど、そうなるように作った人も相当すごい! これから色んな場面でAIが活躍するんだろうな
土管を飛び越える所辺りスピード感があって3段ジャンプみたいだった
AIが数百万回試行して習得する操作をその日のうちに習得できる人間ってすごいんだなと思った
@user-sp1mg8sn7x
Жыл бұрын
まあただ人口知能は多重影分身学習ができますからね 数百万回の試行を一瞬でこなせるようになった時すごいことになる
敵を踏んだ反動でジャンプできるってところもしっかり学習してるのやべぇ
この学習方法で1-1またやってみてほしい
ブロック破壊をするたびに、負の報酬(極微小)を与えると「破壊活動が収まり敵を待ってから動く」のか「気にせず破壊してスピードクリアする」のか気になります。 個人的には、両方試してから「こっちが多く報酬がもらえる」とaiが考察してほしい
@JR-ev4ui
3 жыл бұрын
そのブロック破壊した時の負の報酬の量によって決まりそう
待ってました!!
強化学習型のテトリスAIも見てみたいです
常人にはクリア不可能みたいなゲームを強化学習でクリアしてるのを見たいなw
@user-ok8nt2jz3v
3 жыл бұрын
たけしの挑戦状
@sonic-bn4bt
3 жыл бұрын
改造マリオ
@名前未設定150人目標
2 жыл бұрын
@@sonic-bn4bt あれはまだ行ける
素晴らしい研究
ついに、配管工も AI に取って代わる職業になってしまったんですね これも時代ですかね...
シューティングゲーム系はすごいのが出来そう
@user-pe6wf3ri3s
3 жыл бұрын
2Dも3Dも見てみたい
@user-vd6jz7fk7o
3 жыл бұрын
某弾幕ゲームとか
次はクッパ戦ですね!(鬼畜)
@ray00000
3 жыл бұрын
それは草
@user-ti3op8yu2t
3 жыл бұрын
まずクッパ作るのがむずそうw
@NT-zf8dx
3 жыл бұрын
@@user-ti3op8yu2t 棒読みちゃんでいいのでは
@user-ml7jt1dc4r
3 жыл бұрын
@@NT-zf8dx システム面の話では?
東方みたいな避ける系のシューティングゲームでできたら見応えありそう
@atomic-senn
3 жыл бұрын
たしかに
7:12位からの別視点カメラのこーじ、頭ポヨポヨしててジワる
土管の間の敵をわざわざ踏んで進むところ好き
この時を待っていたぞこーずぃ
凄いですね! カメラ画像での学習でも、戻ったり少しまったり、ジャンプの微調整したりもするようになるんですね。 こういう報酬にしたら上手くいかなかった、とか、センサーでやると上手くいかなかった、みたいな話はいろんなアプローチが知れるので失敗も話して貰えるのは楽しいな、って思います!
今回も楽しませていただきました。次回はエキサイトバイクとか見てみたいす。
この学習をしたものを別のステージで適用したらどのくらいのもんなのか気になります。
途中からTASのRTAみたいな動きになるの好き。
ジャンプ回数やブロック破壊回数が少ないほど報酬が多くなれば スムーズな攻略するようになるのかな?
@hayami_maguro
3 жыл бұрын
3:11 無駄なジャンプを減らすようにジャンプしたら微小の罰が設定されていますが確かにもう少し値が大きくてもいいかもしれませんね
かなりするのは難しいでしょうけどダクソの強化学習を見れたら最高ですね
す、すごい!アクションゲームを学習しているっ!! まったくのノーヒントから一つ一つ積み上げての学習だから 人間のプレイヤーがやるような推測と飛躍がないかわりに途方もない回数の試行を繰り返してクリアしている! 移動、移動量の調整、ルート選定、タイミングを計り、回避、踏みつけ…… これだけの要素があるというのに、それぞれを理解しているわけでもなく最適化されているっ! こんな面白い事があるんだ!強化学習ってすんごい!
色んなステージで学習させたAIが全く新しいステージをクリアできるのかとか面白そうですね
画面の画像から学習できるとかすごく人間に近づいてる
3:12 敵を倒した時の報酬を無くせば最速クリアしようとするんですかね…?
@MK-nw7jy
3 жыл бұрын
1フレーム毎の罰を増やしても良いかと思いますね。
@user-ss5wl8ub2r
3 жыл бұрын
早くクリアすればするほど報酬...とか?
@user-ye9cb3rg6g
3 жыл бұрын
@@user-ss5wl8ub2r 上から4行目見てみ
@user-bk3sb6ij4g
3 жыл бұрын
無駄なジャンプ減らせるように、ジャンプしたら罰/ブロック壊せたら報酬/敵を踏んだら報酬とかも面白そうだな
@Akita_ken2236
3 жыл бұрын
@@user-bk3sb6ij4g そしたら初期段階で困惑し始めるのでは?ジャンプは必須動作なので
学習した個体で何面まで進めるかやってみて欲しいです。残機付けちゃうと無理そうなのでとりあえず今回と同じルールで何回もくりかえせる形にした方が良さそうですかね
うぽつ 動画面白かったです
アフロじゃなかったら死んでそう
ツムツムとかテトリスとかのパズルゲーム学習させるの面白そう!
強化学習大好きだなw いつか生成モデルも試してほしい
こういうのがこーじって感じして好き
うぽつです! マリオ2とか、難しいステージも見てみたいですね〜 あ、水中も面白そうですね!!
最初クリアできるかも怪しいのに最後RTAみたいな動きしてるの草 TAの理想ルート取りをこうやって探す時代も遠くなさそう
AIを学習させる方法を学習していく主の成長が一番の伸び代。
格闘ゲームをAIで強化学習したら 各キャラに対応して挙動が変わるのかなぁ
初代ロックマンのイエローデビルの攻撃(分離→合体)を、AIがどのように成長してかわすのか見てみたいです🤗
ばりばり壁破壊しながら進むの面白かった。もっと難しいアクションのも見てみたい。 アクションじゃないけどアモングアスとかもAIにできるのかな
すごーい! このやり方で1-1再挑戦 からの比較って、 動画に出来ませんか?
クッパステージの正解とおらないと進めないステージとかって学習で何とかできるんですかね?
今度ダッシュも入れて欲しいです!笑
今回は画像情報(恐らくCNNベースを使ってる?)にしたんですね。 恐らくレーザーで認知する方法だと、エージェントが認識する範囲が局所的過ぎるのに、移動に伴って激しく情報が変化するので、その場その場で反応してピクピク動くのだと想像します。 一方、画像全体だと、行動の後の穴や敵の位置など、広い範囲で認識できるので、より賢い動作に見えるようになったのだと思います。 また、画像認識は強化学習同様にかなり進歩してるので、大変良い組合せだと思います。
5:21 嬉しそう
3:25で「何人かで一緒に学習して知見を共有したり」ってあるんですけどどうやって共有してるんですかー いまこーじさんの影響で機械学習を勉強しているので教えていただけるとうれしいです
1ジャンプ2キルしてる辺り そこそこゲームが上手い人がプレイしてる様に錯覚した しかも多分あんまり操作性良くない中でこれは凄い
強化学習のやり方とか解説して欲しいです!
天才ですね
FCテニスとかゴルフ(マリオゴルフ含む)みたいなのも楽しそうですね。今でも遊びたい一品。
素晴らしい! 前に魔界村1面クリアに挑戦しましたがうまく行きませんでした。。ぜひ挑戦していただきたいです。
パックマンの強化学習気になります….!
有名ゲームはわかりやすくていいですね おもしろかった
クリア可能な範囲でランダムにマップ変えたらどれくらい対応できるんだろう。
横シュー(STG)みたいな、敵の弾を避けつつ倒す様なゲームを学習させてみて欲しいです 弾幕ゲーとかも面白そうですね
しょぼんのアクションみたいに最適解の動きをすると確定でトラップが仕掛けてある場合はどんな反応するか
ひたすらにブロック壊してスペース作りしてたのでブロック破壊を最小限に抑えてクリアする姿もみてみたいです!
2ブロック同時に破壊するAI凄すぎ
レースゲームの学習を見たいな。 実際の自動運転と違う所が有るなら、違う所の解説とかも聞きたい。
是非、8-4を学習するところを見てみたいです。 あの、迷路のような構造をどうやってクリアしていくかが見てみたい。
【リクエスト】8-4もクリアさせてみてほしいです。(ファイアーバーの攻略方法が気になるため)
複数プレイヤーがいて踏んだら倒せるとかの環境で学習してレースとかさせたらどうなるんだろうと思った おもしろい!
この学習法でしょぼんのアクションとかできたらすごいですよね!挑戦お願いします笑
ストリートファイターみたいな2D格ゲーでAI同士で戦わせてみて欲しい
今回の学習後パラメータで別ステージがクリア出来るのかが気になります。
タワーディフェンス系のゲームで最適解を教えてくれるAIが見てみたい。
シューティングゲームとか楽しそう
量子コンピュータとかが普及したらAIの学習速度も上がるんだろうなぁ
カップヘッドのAI学習見てみたい🤤 すげーむずそー
スーパーキノコやフラワー、テンコインブロック等ケチをつければキリがないけどこれは素晴らしいです
AIのゲーム挑戦面白い!色んなゲームでやって欲しい!
横幅が短い足場が進行方向に動くタイプのステージでやってみてほしいです…!!
こりゃあ色々職業が奪われそうだわ笑
初代星のカービィとかどうでしょうか?初代はコピー能力がないので行けそうな気がします。 (吸い込みの概念が難しいかな?)
ファミコンにあった、ルート16ターボいけないでしょうか!
こーじさんはどうやってAIに学習させてるんでしょうか? Python等のプログラミングでやってる?それともプログラムの知識がなくとも学習させることができるツールがある?
東方projectの恋符「マスタースパーク」を物理エンジンで再現って出来ますかね?
ロードランナーとかドアドアとか面白そう
フレームごとの罰、ジャンプの罰、敵を倒した報酬辺りの比重は変えたら挙動が大きく違いそうですね
スペランカー見てみたい ほんの僅かな坂でも落下死するのをAImどう乗り越えるのか
@ginrin51
3 жыл бұрын
これ!
@user-yn6zh7gr5u
3 жыл бұрын
言おうと思ったらもうコメントあった。 これ、お願いします
上を壊せるようにしたら、何回くらいで安定して上に行くようになるんだろうか
スペランカーは出来ますか?強化学習AIもブチ切れる難しさなのか、強化学習なら2Dゲームはなんでもクリア出来るのかを見てみたいです。
初期のマリオブラザーズをAI2P同時はどうでしょう。AIがそれぞれ協力したり邪魔したりするんでしょうかね?
アグレッシブすぎるw
fpsシューティングのゲームとか覚えさせても面白そう。
AIにマリオメーカーの難しい学習させてみたいですね あと、マリオメーカーでギリギリクリアできる難しいステージ作って欲しいですね
将来的にFPSや横スクロールシューティングゲームとかやってみてほしいです
ロックマンのステージ攻略してみて欲しいなぁ。消えたりするブロックとか動く足場を突破出来るのか気になる
これ天井のブロックも破壊できるようにしたら天井駆け抜けるように学習したりするんだろうか?
@yusei527
3 жыл бұрын
それも試してみたいですね! 強化学習では、エージェント(アフロの方)が探索とそれによる経験に基づいて報酬が最大化されるような行動をとるので、まず少なくとも一度上に上がってみる必要がありますね。 そのルートの方が下で敵を倒して進む(ちょっと報酬がもらえる)より報酬が高くなるなら、すぐさま上に上がって一直線に進むようになりますよね笑