笔记|纪录片|深入大脑

纪录片《深入大脑》笔记。常看常新,复习旧知识,也跟进下最新研究。这个1.5千克的宇宙如此迷人。面对自然,唯有静默与震撼。

TD Learning model simulation

By TD learning, the agent learns from future rewards and back-propagates prediction errors by updating estimation values(keep updating beliefs of future rewards at every moment approaching the future). It is one of the core concepts of model-free reinforcement learning.

强化学习,多巴胺,神经影像

在喂食之前响铃,久而久之,狗会将铃声和食物联系起来,听到铃声时立即分泌唾液。通过食物(强化物 reinforcer),铃声和唾液分泌之间形成联系(association/contingent),且逐渐强化(reinforce),形成条件反射。

意识与心灵

好奇心:哪些心理现象是可以用科学方法(可重复、可复现)研究的?主观体验是否可以被研究(存在、可量化、可测)?行为或神经活动可以被研究,它们是(所有或部分)主观体验的映射或延伸吗?精神、意识、认知过程、主观体验、心灵等,是否可以被还原为物质、物质运动、涌现?

意识的科学研究

意识,是一个哲学命题,也是一个科学命题。 在人类研究意识本质的2000多年中,最后这100年,科学家从哲学家手中暂时接过了这个问题。

控制论胡言乱语

有机体不仅仅是一个被动的反馈系统。在主动与环境的交互中,它们提取信息,构建世界,学习,适应。环境动态变化。观察者与被观察者的界限逐渐模糊,融合为一个系统。机器不只是机械构造的物理实体。广义的机器:即时反馈、响应操作的程序。环境、游戏、身体环境、社会群体,人本身,都是机器。cybernetics希腊语原义为控制调整帆船,steer to the goal。

思维、认知、精神,实质上是否可还原为生化反应过程。控制论美学,形式化的艺术吗。人是逆熵吗。