[Automata] Ch8 图灵机 TM
2024-12-14 738 words 3 mins

[Automata] Ch8 图灵机 TM

学习Automata PPT的记录. 相关笔记会另开博客记录. 也可能不会开.

[ControlSystem] Ch13 数字控制系统简介
2024-12-14 509 words 1 min

[ControlSystem] Ch13 数字控制系统简介

学习控制理论课程PPT的记录. 相关笔记会另开博客记录. 也可能不会开.

[ControlSystem] Ch11 状态变量反馈控制系统设计
2024-12-14 1.4k words 6 mins

[ControlSystem] Ch11 状态变量反馈控制系统设计

学习控制理论课程PPT的记录. 相关笔记会另开博客记录. 也可能不会开.

[ControlSystem] Ch3 状态空间模型
2024-12-13 1.9k words 8 mins

[ControlSystem] Ch3 状态空间模型

学习控制理论课程PPT的记录. 相关笔记会另开博客记录. 也可能不会开.

[ControlSystem] Ch7 根轨迹法
2024-12-13 2k words 7 mins

[ControlSystem] Ch7 根轨迹法

学习控制理论课程PPT的记录. 相关笔记会另开博客记录. 也可能不会开.

[ControlSystem] Ch6 控制系统的稳定性
2024-12-13 910 words 3 mins

[ControlSystem] Ch6 控制系统的稳定性

学习控制理论课程PPT的记录. 相关笔记会另开博客记录. 也可能不会开.

[RLHF] OpenRLHF食用指南
2024-12-05 690 words 3 mins

[RLHF] OpenRLHF食用指南

[docker] nvidia-docker使用教程
2024-12-05 2.1k words 9 mins

[docker] nvidia-docker使用教程

nvidia-docker安装过程中各种报错的解决流程. 以及GPT回答的docker教程.

[RL] TRPO 和 PPO
2024-12-03 4.4k words 18 mins

[RL] TRPO 和 PPO

准备写TRPO和PPO的代码. 数学的推导非常的多, 即使不深究原理也有难度

[misc] 24-12 那些我看到的
2024-12-02 367 words 1 min

[misc] 24-12 那些我看到的

小说 道与碳基猴子饲养手册 目前看了一百二十章左右, 情节铺垫了一通总算有了个小高潮? 前面的零零碎碎, 异星歧途篇, 拱白菜篇, 都算是在铺垫里面. 调查案件一段的剧情总算有了点主线的味道. 塑造的浪荡吟游诗人, 丑陋巨蜥教父, 被控制的机械夜莺, 还有神的分身小女孩, 幼儿园园长, 都有了他们的性格色彩. 有趣. 关于理识侧和约律侧的设定也非常的有趣. 看完了天灾女孩的故事, 让我想起了龙族. 同样是一个衰仔, 同样是一个宏大的背景故事和不宏大的人物以及爱恨情仇, 同样是日常时刻的插科打诨, 情节高潮的震撼人心. 当然碳基猴子里科幻的部分很多, 各种设定和虚构的书籍势力什么的一大堆,
[Automata] Ch7 上下文无关语言 CFL
2024-11-25 912 words 4 mins

[Automata] Ch7 上下文无关语言 CFL

学习Automata PPT的记录. 相关笔记会另开博客记录. 也可能不会开.

[misc] 24-11 那些我看到的
2024-11-18 6.4k words 21 mins

[misc] 24-11 那些我看到的

小说 我岳父是李世民 B站视频里找的. 主要情节就是男主在不知情的情况下娶了李世民的女儿, 顺便治好了她的贫血. 然后就是发明现代人的各种小玩意. 目前看了200章左右, 总共是一千章. 比较平淡的文笔, 有种简简单单过日子的低欲望感觉. 就是男主的性格不是很讨喜, 有种刻意"犯贱"的感觉, 只看见借着现代人的优势在那搅东搅西了, 没看到性格上的闪光点. 看着不是很喜欢. 评价是5-6分, 能看, 但是不太能看. 文笔看着还行, 虽然很碎也很浅, 但是至少能把事情讲清楚. 情节安排和人物形象有些不讨喜. 一品布衣 也是B站视频找的. 也是开局送老婆的类型. 开始
[ControlSystem] Ch5 控制系统的性能
2024-11-14 4.6k words 19 mins

[ControlSystem] Ch5 控制系统的性能

学习控制理论课程PPT的记录. 相关笔记会另开博客记录. 也可能不会开.

[misc] 先装ubuntu, 再装win11双系统
2024-11-13 1.6k words 5 mins

[misc] 先装ubuntu, 再装win11双系统

先装ubuntu, 再装win11双系统. 预计流程应该和普通的双系统差不多.

[Automata] Ch6 下推自动机 PDA
2024-11-13 4.1k words 18 mins

[Automata] Ch6 下推自动机 PDA

学习Automata PPT的记录. 相关笔记会另开博客记录. 也可能不会开.

[Automata] Ch3 正则表达式与正则语言: Regular Expressions and Languages
2024-11-13 203 words 1 min

[Automata] Ch3 正则表达式与正则语言: Regular Expressions and Languages

CH3 Regular Expressions and Languages

学习课程"形式语言与自动机"时做的笔记, 内容主要来自 Automata Theory, Languages, and Computation一书的第三章. 主要是关于RE的内容.

[Automata] Ch5 上下文无关语法 CFG
2024-11-13 2.1k words 8 mins

[Automata] Ch5 上下文无关语法 CFG

学习Automata PPT的记录. 相关笔记会另开博客记录. 也可能不会开.

[RL] PyTorch实现RL框架算法 及 DQN
2024-11-11 1.1k words 4 mins

[RL] PyTorch实现RL框架算法 及 DQN

前两天折腾了一下DQN, 但是很杂乱. 今天打算干干净净地把DQN给做了.

[misc] 11-10 折腾的一些杂项
2024-11-10 1k words 4 mins

[misc] 11-10 折腾的一些杂项

11.10的一些杂项

[PyTorch] 关于自动求导机制以及优化器的工作原理
2024-11-08 3.1k words 11 mins

[PyTorch] 关于自动求导机制以及优化器的工作原理

关于自动求导机制以及优化器的工作原理. 主要是GPT的说明, 夹杂了一些自己的总结.

[RL] stable-baselines3实现DQN, double DQN, Rainbow, DDPG, TD3, SAC, TRPO, PPO
2024-11-07 5.5k words 22 mins

[RL] stable-baselines3实现DQN, double DQN, Rainbow, DDPG, TD3, SAC, TRPO, PPO

实现DQN算法前, 打算先做一个baseline, 下面是具体的实现过程.

[misc] 11-06 折腾的一些杂项
2024-11-07 633 words 2 mins

[misc] 11-06 折腾的一些杂项

11.06的一些杂项

[misc] 11-05 折腾的一些杂项
2024-11-05 1.1k words 4 mins

[misc] 11-05 折腾的一些杂项

11.05的一些杂项

当妖精们舞动翅膀
2024-11-05 165 words 1 min

当妖精们舞动翅膀

随手写了一首小诗.

[RL] 第八讲: 深度策略梯度
2024-11-05 997 words 4 mins

[RL] 第八讲: 深度策略梯度

基于上海交通大学强化学习课程系列课程学习RL的笔记.
SJTU RL Course (wnzhang.net)

前面讲的DQNs和DPGs要么是基于价值的方法, 要么是基于确定性策略的方法. 这里我们讨论基于随机策略的方法.

[RL] 第七讲: 深度强化学习
2024-11-05 929 words 3 mins

[RL] 第七讲: 深度强化学习

基于上海交通大学强化学习课程系列课程学习RL的笔记.
SJTU RL Course (wnzhang.net)

我们进一步介绍各种深度学习方法. 由于引入了神经网络和深度学习, 所以我们遇到了更多的问题, 也探究出了更多的解决方法.

[RL] 第六讲: 价值和策略近似逼近方法
2024-11-05 1.2k words 4 mins

[RL] 第六讲: 价值和策略近似逼近方法

基于上海交通大学强化学习课程系列课程学习RL的笔记.
SJTU RL Course (wnzhang.net)

前面我们基于格子世界, 讨论了离散状态和离散动作. 现在, 我们引入神经网络, 开始探索连续的使世界.

笔记本续航省电攻略 Ubuntu22.04
2024-11-04 1.5k words 6 mins

笔记本续航省电攻略 Ubuntu22.04

尝试增强游戏本续航的折腾记录.

[Complier] Ch3 词法分析
2024-11-04 1.1k words 4 mins

[Complier] Ch3 词法分析

学习编译原理PPT的记录. 相关笔记会另开博客记录. 也可能不会开.

[misc] 11-04 折腾的一些杂项
2024-11-04 873 words 3 mins

[misc] 11-04 折腾的一些杂项

11.04折腾的一些杂项

backtop