Facebook刷新开放域问答SOTA:模型训模型!Reader当Teacher!

Facebook刷新开放域问答SOTA:模型训模型!Reader当Teacher! 7

知行编程网 人工智能前沿 2年前 (2022-02-01) 60 0

一部问答系统发展史就是一部人工智能发展史。早在1950年的图灵测试就提出:如果人类无法通过问答将机器和人区分开,那么这个机器就可以被认为具有智能。问答系统和人工智能有着密不可分的关系。从基于规则和结构化数据的自动问答,到基于精细设计神经网络的文本问答,再到T5[1]将一切文本任务都转化为问答,我们足以看出自动问答系统在走向机器智能的过程中的重要性。 当前主流的问答系统主要分为几类:FAQ检索型、闲...

震惊!深度学习新手上路葵花宝典问世江湖

震惊!深度学习新手上路葵花宝典问世江湖

知行编程网 人工智能前沿 2年前 (2022-02-27) 4 0

这篇综述论文列举出了近年来深度学习的重要研究成果,从方法、架构,以及正则化、优化技术方面进行概述。它对于刚入门的深度学习新手是一份不错的参考资料,在形成基本学术界图景、指导文献查找等方面都能提供帮助。 论文:Recent Advances in Deep Learning: An Overview   论文地址: https://arxiv.org/pdf/1807.08169v1.pdf  或 ...

文本分类问题不需要ResNet?小夕解析DPCNN设计原理(下)

文本分类问题不需要ResNet?小夕解析DPCNN设计原理(下) 12

知行编程网 人工智能前沿 2年前 (2022-01-04) 71 0

哎呀呀,说好的不拖稿的又拖了两天T_T,小夕过一阵子分享给你们这两天的开心事哦。后台催稿调参系列的小伙伴们不要急,下一篇就是第二篇调参文啦。 好啦,接着上一篇文章,直接搬来DPCNN、ShallowCNN、ResNet的对比图。 从图中的a和c的对比可以看出,DPCNN与ResNet差异还是蛮大的。同时DPCNN的底层貌似保持了跟TextCNN一样的结构,这里作者将TextCNN的包含多尺寸卷积滤...

SIGIR20最佳论文:通往公平、公正的Learning to Rank!

SIGIR20最佳论文:通往公平、公正的Learning to Rank!

知行编程网 人工智能前沿 2年前 (2022-01-23) 3 0

SIGIR2020 的 best paper 终于出炉,这次获奖论文是 Controlling Fairness and Bias in Dynamic Learning-to-Rank,这是一篇 排序学习(Learning to Rank,LTR) 的论文。 排序是匹配用户和内容(文章、视频、音乐)主要手段。在推荐和搜索场景中,目前的排序算法存在对用户和内容双方不公平的问题,针对此问题,本文提出...

谈谈怎样提高炼丹手速

谈谈怎样提高炼丹手速 4

知行编程网 人工智能前沿 2年前 (2022-02-04) 4 0

最近搞定几件焦头烂额的大事后,终于有了一丢丢的时间来写写文章,并且偶尔思考下算法工程师的核心竞争力是什么。 前不久一时兴起写了篇标题党文章《惊了!掌握了这个炼丹技巧的我开始突飞猛进》,简单描述了一下我的升级打怪路线图。后来想了想,发现还有一点极其重要的基本功常常被大家忽略,但确是初级&中级算法工程师之间拉开差距的重要因素,那就是:手速。 手速有什么用呢? 假如一件事情工程量较大(大型实验 ...

利用光学卫星图像探测云雪的多分辨率全卷积网络

利用光学卫星图像探测云雪的多分辨率全卷积网络

橙子 每日Arxiv 2年前 (2022-01-11) 20 0

今天和橙子姐姐一起看一下遇到云雨卫星图像如何处理吧~ 云和雪在可见光和近红外 (VNIR) 范围内具有相似的光谱特征,因此在高分辨率 VNIR 图像中难以相互区分。本文通过引入短波红外 (SWIR) 波段来解决这个问题,其中云具有高反射性,而雪具有吸收性。由于与 VNIR 相比,SWIR 通常具有较低的分辨率,因此本研究提出了一种多分辨率全卷积神经网络 (FCN),可以有效地检测 VNIR 图像中...

我拿乐谱训了个语言模型!

我拿乐谱训了个语言模型! 7

知行编程网 人工智能前沿 2年前 (2022-01-28) 8 0

最近在刷EMNLP论文的时候发现一篇非常有趣的论文《Learning Music Helps You Read: Using Transfer to Study Linguistic Structure in Language Models》,来自斯坦福大学NLP组。论文有趣的发现是让语言模型先在乐谱上进行训练,再在自然语言上训练可以有效的提升语言模型的性能。在看了一大堆BERT-based的模型...

深度学习,路在何方?

深度学习,路在何方? 3

知行编程网 人工智能前沿 2年前 (2022-02-13) 12 0

文 | Severus 最近,AI领域的三位图灵奖获得者Yoshua Bengio、Yann LeCun和Geoffrey Hinton共同发表了一篇文章,名为Deep Learning for AI,文中讨论了深度学习的起源、发展、成就及未来。 文章标题: Deep Learning for AI 原文链接: https://cacm.acm.org/magazines/2021/7/25346...

扫一扫二维码分享