diff --git a/.github/workflows/compile_with_latex_2020.yml b/.github/workflows/compile_with_latex_2020.yml index 73c17d3..1b82639 100644 --- a/.github/workflows/compile_with_latex_2020.yml +++ b/.github/workflows/compile_with_latex_2020.yml @@ -7,7 +7,7 @@ on: [push, pull_request] jobs: build_latex: - runs-on: ${{ matrix.os }} + runs-on: ubuntu-latest strategy: matrix: os: [ubuntu-latest] diff --git a/.github/workflows/compileandrelease.yml b/.github/workflows/compileandrelease.yml index c3dcd66..ef2e59d 100644 --- a/.github/workflows/compileandrelease.yml +++ b/.github/workflows/compileandrelease.yml @@ -1,7 +1,10 @@ name: Compile Latex -on: [push] +on: + push: + branches: ['**'] + tags: ['v*'] jobs: build_latex: diff --git a/.gitignore b/.gitignore index 2686c44..f011c2b 100644 --- a/.gitignore +++ b/.gitignore @@ -20,7 +20,7 @@ elegant*-en.pdf *.dvi *.xdv *-converted-to.* -# these rules might exclude image files for figures etc. +# These rules might exclude image files for figures, etc. # *.ps # *.eps # *.pdf @@ -232,7 +232,7 @@ TSWLatexianTemp* # KBibTeX *~[0-9]* -# auto folder when using emacs and auctex +# Auto folder when using Emacs and AUCTeX ./auto/* *.el diff --git a/chap0/preface.tex b/chap0/preface.tex index 740efd2..7bd3490 100644 --- a/chap0/preface.tex +++ b/chap0/preface.tex @@ -15,9 +15,9 @@ Actor-Critic (AC) && 行动者-评论家 \\ \midrule - boold oxygen-level dependent [singal](BOLD) &&血氧水平依赖 \\ + blood oxygen-level dependent [singal](BOLD) &&血氧水平依赖 \\ \midrule - rostral cingulate motor area(CAMr) &&头侧扣带运动区 \\ + rostral cingulate motor area(CMAr) &&头侧扣带运动区 \\ \midrule cinggulate motor areas(CAMs) &&扣带运动区 \\ \midrule @@ -27,13 +27,13 @@ \midrule frontal eye field(FEF) &&额叶视区 \\ \midrule - funtional magnetic resonace imaging(fMRI) &&功能性核磁共振成像 \\ + functional magnetic resonance imaging(fMRI) &&功能性核磁共振成像 \\ \midrule antero-dorsal granular area(GrAD) &&前背颗粒区 \\ \midrule antero-lateral granular area(GrAL) &&前外侧颗粒区 \\ \midrule - dorsal granlar area(GrD) &&背侧颗粒区 \\ + dorsal granular area(GrD) &&背侧颗粒区 \\ \midrule medial granular area &&内侧颗粒区 \\ \midrule @@ -43,7 +43,7 @@ \midrule poster-medial granular area(GrPM) &&后内侧颗粒区 \\ \midrule - ventral granular area(CrV) &&腹侧颗粒区 \\ + ventral granular area(GrV) &&腹侧颗粒区 \\ \midrule thousand years ago(Ka) &&千年前 \\ \midrule @@ -61,7 +61,7 @@ \midrule orbital frontal cortex(OFC) &&眶额皮层 \\ \midrule - positron emission tomography(PEF) &&正电子发射断层扫描 \\ + positron emission tomography(PET) &&正电子发射断层扫描 \\ \midrule prefrontal cortex(PF) &&前额叶皮层 \\ \midrule diff --git a/chap10/chap10.tex b/chap10/chap10.tex index 63c46b0..120f632 100644 --- a/chap10/chap10.tex +++ b/chap10/chap10.tex @@ -4,7 +4,7 @@ \section{概要} 本章将我们的提议与文献中的其他提议进行比较, 并通过 5 个测试对每个提议进行评估: (1)该提议是否考虑到了前额叶皮层的进化史? -(2)它是否解释了连接解剖学如何允许前额叶皮层执行所提议的功能? +(2)它是否解释了解剖连接结构如何允许前额叶皮层执行所提议的功能? (3)它是否明确了前额叶皮层的功能与其他区域的功能有何不同? (4)是否与前额叶皮层的广泛发现相一致? (5)它的陈述是否精确到足以被测试? @@ -15,9 +15,9 @@ \section{介绍} 第~\ref{chap:chap1}~章阐述了 5 个目标,我们现在可以更全面地阐述这些目标: \par -1.说颗粒状前额叶皮层让灵长类动物做了他们的祖先和其他哺乳动物做得效率较低的事情,如果有的话,以及说类人猿灵长类动物颗粒状前额叶皮层的扩张让他们比其他灵长类动物做得更好。 +1.阐明颗粒状前额叶皮层使灵长类动物能够完成其祖先与其他哺乳动物低效完成(或无法完成,如适用)的行为;同时阐明,类人猿的颗粒状前额叶皮层扩张,令其相关能力优于其余灵长类。。 \par -2.说颗粒状前额叶皮层的轴突连接如何允许的,而不是其他区域,提供这些优势。 +2.阐明颗粒状前额叶皮层特有的轴突连接模式(区别于脑内其他脑区),如何促成上述优势。 \par 3.作为一个整体解释粒状前额叶皮层的基本功能,并解释它的功能与大脑其他部分的功能有何不同。 \par diff --git a/chap11/chap11.tex b/chap11/chap11.tex index fc4c1a6..ba9519b 100644 --- a/chap11/chap11.tex +++ b/chap11/chap11.tex @@ -4,20 +4,20 @@ \chapter{强化学习的心理学} \label{chap:chap11} 在前面的章节中,我们仅从计算方面考虑就提出了算法的设想。 在本章中,我们将从另一种视角来看待这些算法:心理学及其对动物学习的研究视角。 -本章的目的首先是,讨论强化学习的理念和算法如何与心理学家关于动物学习的发现相对应;其次是,解释强化学习对动物学习研究的影响。 +本章的目的,一是探讨强化学习的理念与算法和动物学习相关心理学研究成果的对应关系,二是阐释强化学习对动物学习研究带来的影响。 强化学习提供的明确形式系统化了任务、回报和算法,这对于理解实验数据、提出新实验的种类以及指向可能需要操控和测量的关键因素,都是极其有用的。 -强化学习核心的长期优化回报的理念,正在帮助我们理解动物学习和行为中一些令人困惑的特征。 +强化学习以长期回报最优为核心的优化思路,有助于解释动物学习与行为里诸多难以解释的特征。 强化学习与心理学理论之间的一些对应关系并不令人惊讶,因为强化学习的发展受到了心理学学习理论的启发。 -然而,在本书中,我们从人工智能研究者或工程师的角度,探讨了理想化的情况,旨在通过高效算法解决计算问题,而不是详细地复制或解释动物如何学习。 +然而在本书中,我们立足人工智能研究者与工程师视角,讨论理想化模型,目标是依托高效算法求解计算问题,而非复刻、阐释动物真实的学习机制。 因此,我们描述的一些对应关系将各自领域中独立产生的想法联系起来。 我们认为这些联系点特别有意义,因为它们揭示了无论是通过人工系统还是自然系统学习都至关重要的计算原理。 在大多数情况下,我们描述的是强化学习与学习理论之间的对应关系,这些理论旨在解释像老鼠、鸽子和兔子等动物在受控实验中如何学习。 -20世纪进行过成千上万的此类实验,许多至今仍在进行。 -虽然有时这些实验被认为与心理学的更广泛问题无关,但它们探究了动物学习的微妙特性,常常是由精确的理论问题驱动的。 +20世纪学界开展了上万次这类动物实验,其中不少实验至今仍在持续。 +尽管部分观点认为这类实验脱离心理学宏观研究范畴,但这类实验立足于严谨的理论问题,细致探明了动物学习的细微规律。 随着心理学的重点转向行为的认知方面,即思维和推理等心理过程,动物学习实验在心理学中的作用逐渐减弱。 然而,这些实验发现的学习原则是动物王国中普遍且基本的,在设计人工学习系统时不应被忽视。 此外,正如我们将看到的,有些认知处理方面与强化学习提供的计算视角自然地联系在一起。 diff --git a/chap12/chap12.tex b/chap12/chap12.tex index 66fa57d..ccd0814 100644 --- a/chap12/chap12.tex +++ b/chap12/chap12.tex @@ -1,24 +1,24 @@ \chapter{强化学习的神经科学} \label{chap:chap12} -神经科学是对神经系统的多学科研究:它们如何调节身体功能;控制行为;随着时间的推移,由于发展、学习和衰老而发生的变化;以及细胞和分子机制如何使这些功能成为可能。 +神经科学是研究神经系统的多学科领域,探索其如何调节生理功能、控制行为,以及随发育、学习和衰老发生的变化,并阐明实现这些过程的细胞与分子机制。 强化学习最令人兴奋的方面之一是来自神经科学的越来越多的证据,证明人类和许多其他动物的神经系统实现的算法与强化学习算法惊人地对应。 -本章的主要目的是解释这些相似之处,以及它们对动物奖励相关学习的神经基础的建议。 +本章的主要目的是解释这些相似之处,以及给动物奖励相关学习的神经基础提出一些建议。 强化学习和神经科学之间最显著的联系点涉及多巴胺,这是一种深入参与哺乳动物大脑奖励处理的化学物质。 多巴胺似乎会将\textit{时间差分误差}传递给进行学习和决策的大脑结构。 \textit{多巴胺神经元活动的奖赏预测误差假说}表达了这种平行性,该假说是由计算强化学习和神经科学实验结果的汇聚引起的。 -在本章中,我们讨论了这一假设,导致这一假设的神经科学发现,以及为什么它对理解大脑奖励系统有重要贡献。 +在本章中,我们将讨论这一假设、催生该假设的神经科学发现,以及该假设对理解大脑奖励系统的重要意义。 我们还讨论了强化学习和神经科学之间的相似之处,这些相似之处不如\textit{多巴胺和时序差分误差}的相似之处引人注目,但为思考动物基于回报的学习提供了有用的概念工具。 强化学习的其他元素有可能影响神经系统的研究,但它们与神经科学的联系仍相对未开发。 我们讨论了其中几个不断发展的联系,我们认为这些联系将随着时间的推移而变得越来越重要。 -正如强化学习的早期历史所概述的,强化学习的许多方面都受到了神经科学的影响。 -本章的第二个目标是让读者了解对我们贡献的强化学习方法关于大脑功能的想法。 -从大脑功能的理论来看,强化学习的一些元素更容易理解。 -\textit{资格迹}是强化学习的基本机制之一,它起源于突触的一种推测性质,突触是神经细胞(神经元)相互交流的结构。 +正如强化学习发展历程所示,其许多核心思想都受到了神经科学的启发。 +本章的第二个目标,是向读者介绍我们基于强化学习方法提出的大脑功能相关观点。 +从大脑功能的理论视角出发,强化学习的部分核心机制也能得到更清晰的解释。 +\textit{资格迹}是强化学习的核心机制之一,它源于对突触特性的一种推测——突触正是神经元之间传递信息的关键结构。 在本章中,我们没有深入研究动物基于奖励的学习背后的神经系统的巨大复杂性:本章太短,我们不是神经科学家。 diff --git a/docs/index.md b/docs/index.md index b481dca..58be43f 100644 --- a/docs/index.md +++ b/docs/index.md @@ -2,4 +2,4 @@ title: 主页 # [前额叶皮层](https://github.com/OpenHUTB/PFC) -前额叶皮层.pdf \ No newline at end of file +前额叶皮层.pdf diff --git a/mkdocs.yml b/mkdocs.yml index 5c37478..a07c957 100644 --- a/mkdocs.yml +++ b/mkdocs.yml @@ -28,7 +28,7 @@ plugins: # - mkdocs-video - mkdocs-pdf - search: - lang: ja + lang: zh separator: '[\s\-\.]+' min_search_length: 2 @@ -45,7 +45,7 @@ nav: - 六、规划: '#planning' - 七、发育: '#development' - 八、学习: '#learning' -- 九、疾病: '#desease' +- 九、疾病: '#disease' @@ -54,4 +54,4 @@ nav: markdown_extensions: - admonition - attr_list - # - mdx_math \ No newline at end of file + - mdx_math