晓查 发自 凹非寺
量子位 报导 | 大众号 QbitAI
什么？同行评定现已能够被AI程序替代了？
就在4月1日，CMU提出了最新的评定规范算法——State-Of-the-Art Review，SOAR，一起开源了它的Python程序代码。
SOAR优化了曩昔同行评定多目标、大规模散布、推迟极高的缺点。
这篇推翻现在同行评定准则的论文，已被“世界AI顶会”SIGBOVIK 2020录入。
SIGBOVIK是在每年4月1日举行的学术会议，只要一天的议程，可是接纳的论文都是全球顶尖名校和科技巨子的尖端研讨。
本年在大会上宣布的SOAR智能体系，必将把人工审阅机制扫进前史垃圾堆。
其他还靠人工审阅论文的AI顶会标明瑟瑟发抖。不过大会评委们却是很高兴，由于今后不用做费劲不挣钱的活了。
船新的论文评分体系
现在同行评定体系存在着无法扩展、运转速度慢、成果不一致的问题。其间，审稿人看稿速度慢是首要问题，别的暴增的博士生数量也不行疏忽。
从1990年到2010年，颁发博士学位的人数呈指数式增加，可是谷歌查找录入的论文数量在曩昔几年中却没有太大改变，即便旋转坐标轴也无法坚持上升趋势。
以上依据标明，要么是现在博士的工作功率比其之前都要低，要么是现有的评定体系没有供给满足的才能审阅渐渐的变多的论文。
很显然是后者。
因而来自CMU的研讨人员提出了SOAR方案。SOAR包括两个重要参数：
1、对文章中的SOTA单词数量进行计数，数字越高越可信。
2、别的便是判别文章新颖性，核算文中novelty这个单词呈现的数量。
然后咱们就得到了SOAR的核算公式：
核算SOAR分数的代码也很简单，咱们咱们能够经过Python 3.7.2的collections.Counter目标传递来完成SOAR算法。
并且，算法完成的本钱很低，即便你没有核算机，也能够让研讨生经过铅笔划线的方法，手艺算出SOAR。
不过第二种算法的难度在于，需求进步研讨生的忍耐力，并压服其更好有利地势用时刻，这一点在试验上还未得到验证。
arXiv网站是咱们看论文常去的当地。
假如你没有“SOAR人肉核算器”，CMU的研讨人员还开发了arXiv的SOAR插件，能够对未经同行评定的论文打分，节约科研工作者的挑选时刻。
插件的实际效果如下：
顶会SIGBOVIK真的很“顶”
SIGBOVIK从2007年开端举行，开始由CMU的高档核算机科学家Harry Q. Bovik带头，核算机异端学会安排，本年已是第14届。
SIGBOVIK是一个研讨内容适当多元化的核算机尖端学术会议。
曩昔SIGBOVIK评论的内容就有：无能专家体系、深空导航、困惑理论、大型多人在线游戏、懊悔最少算法、单独编译、人工智障、天然智能等等。
本年的大会可谓好事多磨，原本方案3月1日截止投稿，可是一拖再拖，直到3月27日才截止。4月1日就举行了大会。
如此高的审阅功率，不得不让人置疑本年的大会评定是不是就现已用上了SOAR体系。
SIGBOVIK大会本年一共只接受了11篇论文，其间不乏CMU这样的名校，也不乏Google、Yandex等闻名科技公司，
广阔科研工作以为，在SOAR体系的加持下，SIGBOVIK将会是逾越ICLR、CVPR水平的顶会。
以上内容纯属文娱。
论文地址：
https://arxiv.org/abs/2003.14415
SIGBOVIK大会主页：
http://sigbovik.org/
会议全程录像：
https:///watch?v=ClfBtwoHPeg
