ランニングできず 英語できず (1) 文体のパターンの繰返しで深層学習する論文を読む 「Dynamic Evaluation of Neural Sequence Models」 https://arxiv.org/abs/1709.07432 一般に自然言語の深層学習では単語間の繋がりをLSTMで学習することが殆どですが、近…

テニス２時間 英語できず (1) 強化学習方程式の不確実性を報酬に取込む論文を読む 「The Uncertaintry Bellman Equation and Exploration」 https://arxiv.org/abs/1709.05380 この論文は強化学習を解くBellman方程式の近似解での不確実性を見積りより精緻に…

ランニング30分 英語できず (1) 3D動画よりDoll House画像を生成する論文を読む 「MatterPort3D: Learning from RGB-D Data in Indoor Environments」 https://arxiv.org/abs/1709.06158 この論文は屋内をMatterPort3Dと云う動画で撮ると、深層学習により屋…

ランニングできず 英語できず (1) CNN最適化の制御式を生成するRNNの論文を読む 「Neural Optimizer Search with Reinforcement Learning」 https://arxiv.org/abs/1709.07417 CNNの最適化の制御式をRNNが強化学習で学習するモデルでかなり画期的なモデルで…

ランニング30分 英語できず (1) DeepMindの外部メモリーによる生成モデルの論文を読む 「Variational Memory Addressing in Generative Models」https://arxiv.org/pdf/1709.07116.pdf この論文は深層学習の生成モデルVAEやGANで成果を出していることに対抗…

テニス２時間 英語できず (1)深層生成による暗黒物質探査の論文を読む 「Enabling Dark Energy Science of with Deep Generative Models of Galaxy Images」 https://arxiv.org/abs/1609.05796 宇宙の80％を占めると云われている暗黒物質は宇宙膨張の謎を解…

ランニング30分 英語：movie 2012 (1) 深層強化学習によるChatbotモデルの論文を読む 「A Deep Reinforcement Learning Chatbot」https://arxiv.org/abs/1709.02349 この論文はアマゾンの2017年の人工知能モデル競技会で開発された応答会話モデルMILABOTの詳…

ランニングできず 英語できず (1) プレイヤーと環境とが敵対的に学習する論文を読む 「Learning to Design Games: Strategic Environments in Reinforcement Learning」 https://arxiv.org/abs/1707.01310v2 この論文は強化学習でプレイヤーと活動する環境と…

ランニングできず 英語できず (1) 問題解決の効率化の論文を読む Arguments for the Effectiveness of Human Problem Solving - Paper Detail この論文は深層学習のHPで紹介されており、人工知能の提唱者であるSolomonoffレイ・ソロモノフ - Wikipediaの定理…

ランニングできず 英語：英語でOpenpose予測モデルを発表 (1) ImageNetの深層学習を24分間で達成した論文を読む [1709.05011v1] ImageNet Training in 24 Minutes 以前なら１ヶ月ぐらいかかったImageNetの深層学習が24分で済ませたという衝撃的なタイトルで…

ランニングできず 英語できず (1) Abbeelの相手の様子を見る強化学習の論文を読む 「Learning with Opponent-Learning Awareness」https://arxiv.org/abs/1709.04326 ロボット学の第一人者のAbbeelが参加している敵対的強化学習の論文です。この強化学習はタ…

ランニングできず 英語できず (1) Attentionによる機械翻訳の論文を読む 「Effective Approaches to Attention-based Neural Machine Translation」(2015/09/20) https://arxiv.org/abs/1508.04025 最近の自然言語処理ではAttentionは必ず聞く言葉なので、ど…

ランニング30分 英語できず (1) RNNで巡回問題を解く論文を読む 「Pointer Network」https://arxiv.org/abs/1506.03134 この論文は深層学習による自然言語処理でよく参照されるが、グラフィカルモデルの最適解も行えるので興味を持ち読んでみました。 まず有…

ランニングできず 英語できず (1) 領域識別による写真の色調転移の論文を読む 「Deep Photo Style Transfer」https://arxiv.org/abs/1703.07511 この論文も大変綺麗な写真が多数表示されていて有名なものです。この論文は情景が異なる入力と参照の２写真があ…

ランニング30分 英語できず (1) 人工生命環境で生存競争定理の再現の論文を読む [1709.04511] An Empirical Study of AI Population Dynamics with Million-agent Reinforcement Learning 自然界と同じ様に狩をする捕食動物（Predator)と獲物（prey)が存在し…

ランニングできず 英語できず (1)敵対的VAEの論文を読む 「Adversarial Autoencodes」https://arxiv.org/abs/1511.05644 前のCyclicに画像を学習するモデルでは敵対的VAEを使っていたので、その論文を読みました。 様々な癖がある手書き文字が数種類ある場合…

ランニングできず 英語できず (1) 画像の転移学習を繰返し訓練する論文を読む 「Unpaired Image-to-Image Translation using Cycle-Consistent Adversalial Networks」https://arxiv.org/abs/1703.10593 この論文は本年初頭に発表され、かなり綺麗な画像が生…

ランニング30分 英語できず (1) 道路交通標識を誤判別させるモデルの論文を読む 「Robust Physical-World Attacks on Machine Learning Models」https://arxiv.org/abs/1707.08945v3 本年４月ころに日産の自動運転の技術者の講演では人命に関わる問題なので…

ランニング30分 英語できず (1)ダーウィン進化論を使った深層学習の最適化の論文を読む 「Deep Learning with Darwin: Evolutionary Synthesis of Deep Neural Networks」 https://arxiv.org/abs/1606.04393v3 このモデルはダーウィンの進化論の発想から深層…

ランニング30分 英語できず (1) 物体の２Dイメージを階層的に３Dにする論文を読む 「Hierarchical Surface Prediction for 3D Object Reconstruction」 https://arxiv.org/abs/1704.00710 この論文は２Dイメージに立方体を当てはめて境界をCNNで認識させて３…

ランニングできず 英語できず (1)一方向から見た 2Dの画像を３Dにする論文を読む 「3D Object Reconstruction from a Single Depth View with Adversarial Learning」 https://arxiv.org/abs/1708.07969 この論文は１方向から見た画像(2.5D画像)を３D画像に…

テニス２時間 英語できず (1) Socherの自然言語の問合せをSQLに変換する論文を読む 「Seq2SQL: Generating Structured Queries from Natural Language using Reinforcement Learning」 https://einstein.ai/static/images/layouts/research/seq2sql/seq2sql.…

ランニング30分 英語できず (1) 非深層強化学習の進化戦略の論文を読む 「Evolution Strategies as a Scalable Alternative to Reinforcement Learning」 https://arxiv.org/abs/1703.03864 公開ソース https://github.com/MorvanZhou/Evolutionary-Algorith…

ランニングできず 英語できず 深層強化学習のサーベイ論文を読む 「DeepLearning for Video Game Playing」https://arxiv.org/abs/1708.07902 最近までのPCゲームやテレビゲームを深層学習で解くAI技術について網羅的に解説した論文である。従って深層学習を…

テニススクール90分 英語できず DeepMindの強化学習での歪んだ報酬の対処の論文を読む [1705.08417] Reinforcement Learning with a Corrupted Reward Channel この論文は報酬が誤解釈や観測失敗やノイズがある場合の対処を論じたもので、かなり長文で数学よ…

ランニング30分 英語できず Abbeelの計画問題の強化学習の論文を読む 「Learning Generalized Reactive Plicies using Deep Neural Network」 https://arxiv.org/abs/1708.07280v1 ロボット学の第一人者USCバークレイのPieter Abbeelが参加している倉庫ゲー…

ランニングできず 英語:Toeic 強化学習でDeepLearnigのネット構造を自動生成する論文を読む [1708.05552] Practical Network Blocks Design with Q-Learning 下図の様に画像識別型のDeepLearningは限界まで識別精度を上げるため、複雑なネットワーク構成を人…

ランニング30分 英語：Toeic 深層密度予測による擬似回数を報酬とした探索の論文を読む [1703.01310] Count-Based Exploration with Neural Density Models End-to-End（RealTimeで学習しながら問題を解く）のDQNは衝撃を与えたが、解けないゲームが多数ある…

ランニング30分 英語:toeic 深層型EMモデルの論文を読む 「Neural Expection Maximization」https://arxiv.org/abs/1708.03498 最近はやりの深層学習型の生成モデルである。スイスのAI研究所IDSIAが投稿したものである。 基本的に生成モデルはデータから隠れ…

ランニング30分 英語：Toeic 深層強化学習で多次元の行動を分解して学習する論文を読む 「Discrete Sequential Prediction of Continuous Action for Deep RL」 https://arxiv.org/abs/1705.05035 DQNでのQ-Learningが高次元のためSGDの深層学習が進まない問…