关键点1.强化学习的发展历程2.马尔可夫决策过程3.动态规划4.无模型预测学习5.无模型控制学习6.价值函数逼近7.策略梯度方法8.深度强化学习DQN算法系列9.深度策略梯度DDPG,PPO等第一天9:0012:0014:0017:00一、强化学习概述1.强化学习介绍2.强化学习与其它机器学习的不同3.强化学习发展历史4.强化学习典

本文已收录https://github.com/lkxiaolou/lkxiaolou欢迎star。问题起因前段时间调研nacos，用来代替zookeeper当作dubbo的注册中心，使用的是nacos的1.1.4版本。还用了nacosSync，一款nacos提供的迁移工具，可将常见的注册中心上的服务同步到nacos上。这玩意很不好用，至少不是生产级别

为什么要迁移？近期进行Jenkins从1.X到2.X的升级演练Jenkins2最新版本只能在JDK8或JDK11版本下运行，我所使用的JDK版本为JDK8在构建MavenJob，Job配置的JDK版本为JDK7时，构建报错$/usr/local/java/bin/javacp

   ActiveMQ实现MasterSlave的方式有几种，一种是使用JdbcPeristent的方式，未被Consumer读取的消息和死消息写在数据库的ActiveMQ\_MSGS表中，还有一种是使用LevelDB文件，这些消息将被存储在LevelDB的.log文件中。  现在我们项目有一个需求是将原先使用JdbcPersistent

MySQLInnoDB引擎的表通过拷贝物理文件来进行单表或指定表的复制，可以想到多种方式，今天测试其中2种：将innodb引擎的表修改为Myisam引擎，然后拷贝物理文件直接拷贝innodb的表空间文件（前提是独立表空间（默认，通过showvariableslike'innodb\_file\_per\_table

Apachekafka这，仅是我学习过程中记录的笔记。确定了一个待研究的主题，对这个主题进行全方面的剖析。笔记是用来方便我回顾与学习的，欢迎大家与我进行交流沟通，共同成长。不止是技术。Kafka介绍与面向MQ编程模式介绍springboot整合ApacheKafka!image20200131104759

  前期，我参与了公司开发的数据库数据迁移工具的工作，以及之前的对Page的分析记录(http://my.oschina.net/u/233784/blog/176279)，在此进一步将数据库的数据类型做一下分析记录。    一、数据库系统表pg\_type  PostgreSQL的所有数据类型都

根据数据类型的不同，对一个问题的建模有不同的方式。在机器学习或者人工智能领域，人们首先会考虑算法的学习方式。在机器学习领域，有几种主要的学习方式。将算法按照学习方式分类是一个不错的想法，这样可以让人们在建模和算法选择的时候考虑能根据输入数据来选择最合适的算法来获得最好的结果。1.监督式学习：2.非监督式学习：在非监督式学习中，数据并不被特别标识，学习模

本篇文章中我们将对机器学习做全面的了解与介绍，其中第一章初识机器学习分为上下两个小章节，对机器学习是什么、机器学习由来以及机器学习的理论等展开说明。目的是能让即便完全没接触过机器学习的人也能在短时间对机器学习有一个全面了解。