嗨多磨。在之前的文章中，我们以Q-Learning为例，先入为主，对强化学习的基本要素和核心思想进行了学习。今天这篇文章，主要是将马尔科夫决策过程单独拿出来探究。它在很多领域都有应用，十分值得单独拿出进行探究和学习。

最近拿到了基于ZYNQ 7020器件的PYNQ开发板，便有了这篇体验文章。本文首先进行常规的开箱和初见印象描述；随后尝试解释了ZYNQ这一硬件的特色；最后以目标检测为例，体验了PYNQ的开发流程。

不会用git的机械工程师不是好厨子（指炼丹与炒菜）。

暑假实习，整理一些笔记文档供日后自我查阅。

动手做！基于nRF24L01P的Arduino无线通信笔记。nRF24L01P是一种容易获得的、可接受的无线通信解决方案，在热门硬件上有可直接使用的库，可方便快速地应用于方案原型中。 关键词：nRF24L01+ , Ar…

​​CAN总线是现代汽车常用的总线技术。有了单片机基础，也正在学习双学位课程。来学习下CAN总线，并尝试动手实验。

Python ＆ Raspberry Pi。寒假计划有要看的几本书。笔记持续更新在这里

在数学建模中，常常会有一些地理位置数据。为了快速地展现其位置分布，可以用百度地图api快速实现地理位置可视化。

完成一些基础实验后，继续深入，了解其特性和一些特别的IO口控制技巧，（删除线）不深不浅、不大不小，又沉又重又便宜又实惠又太贵的AIPC。

搞了一块51实验板。考试周刚刚结束，修完了c艹，学了一点汇编和逻辑电路基础，这个东西变得很容易上手。找一片不大不小、不深不浅的泳池，每天做一些练习吧~