BERT:深度双向语言模型预训练
BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding
通过掩码语言模型进行双向预训练,再针对具体任务微调。论文比较了这一方法在问答、自然语言推断等任务上的表现。
图像:EHT Collaboration BERT: Pre-training of Deep Bidirectional Transformers for Language Understanding
通过掩码语言模型进行双向预训练,再针对具体任务微调。论文比较了这一方法在问答、自然语言推断等任务上的表现。
First M87 Event Horizon Telescope Results. I. The Shadow of the Supermassive Black Hole
事件视界望远镜团队综合多地射电望远镜的观测,重建了 M87 星系中心附近的环状辐射结构。这篇系列首文介绍观测、成像结果及其物理意义。
seaborn: statistical data visualization
介绍 seaborn 如何将表格数据映射为统计图形,以及它与 pandas 和 Matplotlib 的协作方式。
GenTranslate: Large Language Models are Generative Multilingual Speech and Machine Translators
研究利用生成式语言模型整合多个候选译文的方法,考察多语言语音翻译与机器翻译任务中的效果。
Good enough practices in scientific computing
面向研究团队的数据组织、软件编写、项目管理与协作指南,重点是如何将可重复的工作方式融入日常研究。
UMAP: Uniform Manifold Approximation and Projection
介绍 UMAP 软件及其降维方法,可用于把高维样本投影到低维空间并探索数据结构。
First Sagittarius A* Event Horizon Telescope Results. I. The Shadow of the Supermassive Black Hole in the Center of the Milky Way
介绍银河系中心人马座 A* 的事件视界尺度观测,以及团队如何在辐射随时间变化的情况下重建环状结构。PDF 为作者在 arXiv 公开的版本。
Transformers: State-of-the-Art Natural Language Processing
介绍 Transformers 开源工具库中预训练模型、分词器和统一接口的设计,以及如何用这些组件开展自然语言处理研究。
corner.py: Scatterplot matrices in Python
介绍用于绘制散点图矩阵的 Python 工具,展示如何同时检查多维样本的边缘分布和参数之间的相关性。
EcomScriptBench: A Multi-task Benchmark for E-commerce Script Planning via Step-wise Intention-Driven Product Association
提出面向电商脚本规划的多任务评测,研究如何分步理解意图、关联商品并形成脚本。
Ten Simple Rules for Reproducible Computational Research
围绕工作流、软件版本、参数记录与结果存档,整理十条让计算实验更容易复查和重复的建议。
Neural Machine Translation of Rare Words with Subword Units
探讨将词语拆成子词单元如何改善低频词和未登录词的翻译,并比较不同分词策略。
Why Most Published Research Findings Are False
以概率模型讨论研究功效、先验概率、偏倚与多重检验如何影响阳性结论的可信度。
试试其他关键词,或更换学科筛选。