/series/general-paper-reading/ Recent content in General Paper Reading on itu Hugo en &copy; 2024 itsublog. All rights reserved. Mon, 20 Oct 2025 20:39:29 +0800 /posts/2025_paper_reading/seer/ Mon, 20 Oct 2025 20:39:29 +0800 /posts/2025_paper_reading/seer/ <p>原文 <a href="https://arxiv.org/abs/2401.13246">https://arxiv.org/abs/2401.13246</a></p> <p>提出了一个关于</p> <ul> <li>生成 证明假说 \(h\) 的 entailment tree / 完成 结构化推理 任务</li> </ul> <p>的</p> <ul> <li>强化学习训练算法。</li> </ul> <h1 id="task-formulation-任务设置">Task Formulation 任务设置</h1> <h2 id="输入">输入</h2> <ul> <li>\(X = \{x_1, x_2, ..., x_n\}\) — premises, 已知的背景知识、前提的集合</li> <li>一个假说 \(h\) — hypothesis</li> </ul> <h2 id="输出">输出</h2> <p><strong>一个结构化的解释 (A structured explanation)</strong>，通常是一棵<strong>蕴含树 (Entailment Tree)</strong>  \(T\).</p> /posts/2025_paper_reading/pushdown_layers/ Fri, 14 Mar 2025 01:40:39 +0800 /posts/2025_paper_reading/pushdown_layers/ <p>The paper reading note for <a href="http://arxiv.org/abs/2310.19089">Pushdown Layers</a>, the project site of which is <a href="https://www.shikharmurty.com/pushdown/">Pushdown Layers</a>.</p> <h1 id="general">General</h1> <p>在 Autoregressive 更新的时候，Pushdown Layers 这个架构相比普通 Vanilla Transformer 维护一个 stack tape，相当于维护一个partial parse。这样在结束一个句子生成之后，其<strong>成分文法的解析(Constituency Parse)<strong>也会同时生成完毕；并且其可以获得</strong>语法信息</strong>，因此可以获得更高的 perf.</p>