RL基础 Q价值函数和状态价值函数 Action-Value function： Q ( s , a ) Q(s, a) Q(s,a)是agent在状态s下执行某一个动作（如向上走），所获得的及时奖励和未来折扣的累计奖励 State-Value function： V ( s ) V(s) V(s)是…

最近在做左旋圆偏振光（LCP）与右旋圆偏振光（RCP）的研究，因此需要画出他们的图，接下来我就介绍一下用Blender怎么去画LCP与RCP。 首先你需要下载Blender软件，网上直接能搜到，图标如下…

“开源”这个词曾经是Android的护城河，如今却成了谷歌的烫手山芋。最近谷歌宣布调整Android的开源政策，核心开发将全面转向私有分支。翻译成人话就是：以后Android的核心更新，不再公开共享了。 这操作不就是开源变节吗，…

前言： 在 Skynet 中，Lua 扮演了极其重要的角色。Skynet 大多数业务逻辑都跑在一个个 Lua 服务里，而能够将 Lua 环境嵌入到 Skynet 框架下，并与 Skynet 消息调度机制完美结合，正是 snlua 服务所承担的核心功能。 本文将…

引言 在写项目的时候每次在调用的对象的时候，都需要先导入对应的包和手动实例化这个对象，如果对象少的话还能接收，但是spring提供了更好的解决方式，spring是一个IOC（控制反转）容器，他可以储存对…

概述 在Python开发的web应用中，我们通常能够看到flask、uWSGI、Nginx出现在一起，他们之间的关系是什么？为什么总是被应用在一起？  三者共同使用为了实现一个目的：客户端向服务端发送数据请求，服…

时序图（Timing Diagram）是描述数字电路信号随时间变化的图示，广泛用于分析和设计时序逻辑电路，如锁存器（Latch）、触发器（Flip-Flop）、计数器、状态机等。这篇文章从时序图的原理、构…

前言： 上一篇我们分享了 ElasticsearchRestTemplate 的常用普通查询，本篇我们使用 ElasticsearchRestTemplate 来完成 Elasticsearch 更为复杂的聚合查询。 Elasticsearch 系列文章传送门 Elasticsearch 基础篇【ES】 Elasticsearch Windows 环境安装…