実装強化学習

機械学習の本ではなく、深層学習の本でもない。強化学習の本である。たぶん。
C言語。久しぶりにC言語を見たので復習が必要である。ポインター使って二次元配列とか・・・・・知らんがな。
いや、昔は知っていた。最近はPythonばかり使うのでポインター使っての二次元配列って何さ?  つーか、ポインターで何だっけな?  である。ウソ。

2018年の本であるが参照している文献は2007年とかであり、この本はほとんど売れなかったのではないかと思う。オモチャロボットとしてヴィストン社のビュートローバーが登場したである。
昔、この会社の倒立ロボットを買った事がある。10年以上も昔かな。まだあるけど。
ん?  倒立ロボットで機械学習・強化学習を利用して 倒れないような状態まで持っていけたらワタクシは相当に理解が進んだってことになろう。。。と思いついたが、そんな技術・知識がワタクシにあるはずがない。

この本ではライントレースしている。まあ後で読んでみるけど。

将棋AI、囲碁AIが強烈に強くなって話題になったのだけれども、ああいうものはハイスペックPCが必要であり、貧乏・金無しのワタクシは手が出せないのである。マイナビにAI将棋の作り方の本があるのだが、あれはな、GPU搭載のハイスペックPCが必須なんですぜ。
ワタクシのメインマシーンDELL 7010SFFはGPUないの。搭載しようにも箱が小さいので入らないの。。。。ちゃちいグラボーだ入るらしいが・・・・・・・

というわけで読了とサンブルの動作確認を目指す。C言語の復習にもなってよゐこチッゃ・・・・・・多分。
ん?  ゐ という書体はなんじゅら?  る ではないぞ。い の古い書体か。するってーと、あ、い、う、え、お も古い書体があるのか?  それどうしたら出る・・・というのと発音はどうなる? 
何の話だ?   知らん。

その後 出版社から例題をDownloadしました。解凍してVScodeで動作確認・・・・・
gcc でエラーですぜ・・・・ 動かんですぜ・・・ なんでですかね。
著者は動作確認をどのコンパイラで?   なんも書いてないですねえ。。。。。
くまった くまった しまくらちよこ ・・・・ クソ本決定で図書館へ返却だな（笑）

しかーーし、ワタクシは抵抗したのである。ソースコード眺めていて、あらら、と気づいた。new なんてWordがあるではないか、にゅー!!   それってC++じゃね? 

C言語ではなくて C++ なのでわあああぁぁぁ-------!!

  というわけで gcc ではなく、 g++ を使ったらコンパイル・実行しましたですね。例題が2つ動作したので、これはね、 g++ でコンパイルするだすよお・・・

つーか、ここら何の説明もないので、クソ本決定は覆らず（笑） こんな不親切な著者がいるものだと思って呆れてしまった。
普通は、○○で動作確認しました、と書くものだけどなあ。こんな人もいるもんだ。

この本はまったく売れてないだろ・・・・と強く思う次第であるぞ。

将棋もの・・・・将棋ウォーズとか なあぁにぃぃみつけちまったな

あずちゃん かわい。。。。 で? 

四間飛車とか片美濃囲いとか、なにそれ?  棒銀とかもいうとるぞ。なにそれ。あららら、そのうち、そういう宣言がでなくなったぞ。。。。。
ワタクシは戦法知らんので なんとも だが。で、この子は毎日将棋していると食えるものなのかーーーーい!!   知らんわ。

うーむ 巨人は太っ腹なのであーーーた なあぁにぃぃ気づいちまったな

https://hochi.news/articles/20210820-OHT1T51034.html

巨人が２０日、日本ハム・中田翔内野手（３２）をトレードで獲得することを発表した。交換要員はなし。

８月末のトレード期限を前に、巨人が中田獲得という大きな決断を下した。日本ハムで暴行問題を起こし、現在、同球団から１、２軍全試合出場停止処分を受けている中田に再起の手を差し伸べる形となった。

--------------------------------------------------

巨人のやることはワタクシのような凡人には理解できぬばい。腰痛で今年は打撃不審の中田翔を獲得してどないしよーってかね。完治して来季は大活躍するという目論見ですか。
今年はダメなんでしょ。

まーしかし、すきにしたまへよ。 今年も日本シリーズに出てパ・リーグ代表を4縦にするぐらいの根性みせろやあぁぁ・・・
欲しい欲しい病って巨人はいつもそれだからな（笑） 育てるっていう認識がないのだよな、三軍持っていて意味がないだろな、それはそれとして、謹慎処分中の中田翔をトレードで獲得できるものなの? 謹慎処分が解かれないままに?   ワケワカラン。

英語出来ませんが、なにか てへ

SANTA TOEIC 3回め。今度は別のメアドで登録した。そして、例によって実力測定をする。問題が10ちょい出る。ワタクシは目標850点に設定した。実力測定結果は930点だった。だって、SANTA AIがそう予測したんだーーもの。
思い出したのが「West World」というSFドラマだ。40年ぐらい前の映画「West World」の続きみたいなものだ。ハゲのユル・ブリンナーのデビュー作だったらしい。ユル・ブリンナーは故人だ。で、West Worldという娯楽施設では人間型ロボットが奉仕する。ドラマでもそうだ。そして、牧場主の娘 アンドロイドのドロちゃん・・・ドロレスのAIが狂い始めて人間を殺しまくるのである。AIの反乱だ・・・・
で?
    いや、SANTA AIも狂ったのさ。ワイのスコアが930点もあるはずないだろ（笑） まーたまたま実力測定の際の問題が正答多かったのだろ。勘があたったのだな。
なので、これから毎日地道に学習するのだが点数は徐々に下がっていくと思われる。下がりきった当たりが実力だすね。そだねえ。

3回めなので、あら、この問題は答 知ってるもんね、ってものが多々あったりしてな。

他のスマホアプリもこなしているので、なんというか、そのー、あらら、この問題はどっかで見たですわ、ってのが多々ある。写真問題はこなしたのは1000を超える。なので正答率は高いよ。
Part 2も正答率が高くなってきた・・・・だって前に見た問題が出るんだもの・・・
  てなわけで、点数は上がるのは当然だが・・・930点は異常に高すぎる。ワイのレベルは700点台であろうぞ。この謙虚さが好き(´・ω・｀)

それはともかく、SANTA TOEICの評価が高くない。Google Playを見たら4点未満だった。あらま、なんでだろー。いいアプリだと思うのだけどなあ。問題と解答だけでなく解説付きなんだぜ。いいアプリだと思うけどなあ。もっともワイは有料版に移行することはないが。だってこんなのに数千円も払うよりは、焼酎買って飲む方がシアワセですもの・・・・・・・

だが、良いアプリは有料であって当然だと思うよん。制作側の飯の種だし。でもタダのばかり使うんだよ、わい・・・・貧乏・金無しなので(´・ω・｀)

今日の 能書き でしたーーーー!!

秀丸メール ThunderBirdで四苦八苦 うーーむ そーなんだ

こういうソフトとメールサーバーとの関係がいまいちワタクシは分かっていないですね。

受信フォルダーにサブフォルダーがいくつかあって振り分け設定してある。
ThunderBirdをまず起動してだね、メール来てたら読んでだね。振り分けられてますね。ThunderBirdを閉じ。

それから数分後に秀丸メールを起動するですね。さあ問題です。メールは振り分けられているでしょうか? 
振り分けられていないのですね。受信フォルダーには何もない。ThunderBirdで振り分けられたからなあ。
だが、振り分け先フォルダーにもない。なんで? なじぇ?   不可解。「Gmail」の「すべてのメール」というフォルダーにはあった。
うーむ。
ThunderBirdで先に振り分けたので秀丸メールの受信フォルダーには出ない・・・これはそうかもなあと思った。そして秀丸メールは受信フォルダーが空だから振り分けしない。これもそうだなと思った。だが、振り分け先フォルダーにもないのはどうしてだ?  ThunderBirdで振り分けたのでサーバー上でも振り分けられたのではないのかーーーい。そしたら秀丸メールでも振り分け先フォルダーにあって当然ではないのかーーーい。

というわけでワタクシは何を理解していないのであろうか。

そうだ、Win 10メールではどうなっているのだろう。
見たらThunderBirdと同じだった。振り分けられている。うーむ。するってーと秀丸メールは設定ミスか、ワイの・・・・どこいじるんだろな。

てなことで四苦八苦して楽しくて苦しくて 暇つぶしには最高でんがなでんがな

下記の本 まーよーわからんのですけどね そーなんだ

Deep Mind社の天才 デミス・ハサビス 名前だけでも覚えましたね（笑）

で、ワタクシは囲碁についてはまったく知らないのでして、以後、気をつけるように・・・・囲碁だけに、以後って・・・・ ぷぶっ)
囲碁って オセロゲームみたいなものか?  オセロをでかくした盤でやるゲームか。黒と白しかないぞ。王様とか子分とかはいないのか。つまらんな。階級がないのはつまらんな。

で、この囲碁AIは何かに応用できるのか? 囲碁専用なのか。
アルファ碁のソフトを動かすにはCPUが1000を超え、GPUが数百であり・・・・いったい電気代いくらかかるんや（笑）

というわけでワタクシにはワケワカメなのでして、別の本で初歩的なところから学習したいと思う次第であります。上の本ではディープラーニング + 強化学習がキーポイントだなっと感じましたので、強化学習の入門書をまずは読むとして。

機械学習とかDeep Learningとかの本を読むとね、昔からあると書かれている。昔からあるのに、どうして2010年代に急速に性能が上がったんや?  そこだね。
シッタカでAI・機械学習・Deep Learningの数学は統計学であるとか書く物書きもいるのだが、知りたいのはそこではない。昔からある機械学習、基礎は統計学である、それはいいんだって。
そういう昔からあるものがどうして2010年代に急速に性能が上がったのか?  そこをキチンと書けるサイエンスライターってのが少ないのな。
その一つの解説が上の本であるが、ワタクシにはチンプンカンプン・・・と言うよりもワタクシは囲碁に興味ないのでして（笑）
そーだ、将棋のAIの解説本を探そう。ワタクシは将棋のルールなら分かっているし。アマチュア30級ぐらいのレベルだけど。最弱である（笑）

Deep Mind社の天才 デミス・ハサビス ----- Googleが買収したのだけど、Googleはこれで何をしようってんだ?  AI分野で覇者になろうってか。GoogleのAIサービスっかね、そういうものがあるんかーーーい。スパムメールのブロック?  知らんがな。