当前位置: 首页 > 编程日记 > 正文

以AI制作AI,当AutoML加入AI研究员内卷大潮

导读:「深度赋智」首推以知识驱动的全自动机器学习架构,应用于2020四月结束的国际自动机器学习领域的顶级赛事 NeurIPS-AutoDL竞赛,并以压倒性优势获得世界冠军,相关论文于近日被人工智能顶刊IEEE TPAMI接收。

「深度赋智」一直专注于MetaAI技术的自主研发与落地。近日,「深度赋智」与厦门大学纪荣嵘教授联合团队的研究成果“Evolving Fully Automated Machine Learning via Life-Long Knowledge Anchors”(基于知识锚点进化的全自动机器学习)被IEEE TPAMI录用。

困局

深度学习让机器可以从大量的数据中学习经验并加以应用,已经在图像分类,序列标注等多个任务上取得了惊人的成果。但是,这一过程需要大量的人工干预,比如特征提取,模型选择,参数调节等,既费时又费力。

所以专家们自然而然想到了引入自动化让机器自己“学习如何学习”。然而机器学习的自动化离不开几个关键难题:我们该教授什么知识和配备什么工具?在哪一部分实现自动化?自动化训练如何保证稳定的效果?如何在最短时间内找到又简单又高效的方案?

论文指出,当前的自动机器学习多是在整个流程中的某个或某几个独立分段实现自动化,这种“半自动”让搜索自然受限于“次优”并导致最终结果的偏差。而且搜索空间往往“精心设计”,与自动学习的初衷相违背,实际落地时也易出现过拟合的情况。自动机器学习需要对整个网络结构更高层、更进一步的理解。

破局

——论文提出的基于终身知识锚点的进化算法

作者创新性地提出了一种新型的全自动机器学习框架,首次打破了现有自动机器学习中各搜索空间的独立设计,并使用数据集知识锚点加进化算法来加速搜索,解决了在超大空间搜索最优方案的设计难题。

图1 全自动机器学习框架

承袭现有的终身学习与元学习思想,该框架中的知识锚点使用了全新的元特征和概率抽样方法,极大减少了人工,缓解了搜索过程中的过拟合。该框架实现了全流程自动化,极大降低了机器学习应用门槛,用户只需根据提示进行“傻瓜式”操作,自助服务,时间成本低,即使不懂算法和代码,也不是问题。

从实验结果可以发现,该框架在图像/音频/视频/文本/表格五种模态的典型数据集上的效果都远超当前SOTA方案,以下图的图像任务实验为例:

表1 提出的框架(左)和AutoCV2第一(右)的对比

消融实验也证明了知识锚点方法的有效性:

图2 “各搜索方法+ 知识锚点”与原搜索方法的效果对比

使用该框架,「深度赋智」于2020年4月获得国际自动机器学习领域的顶级赛事 NeurIPS-AutoDL系列竞赛总决赛世界冠军,在图像/音频/视频/文本/表格不同场景的十个数据集上稳定获得八项第一和均分第一,证明了该框架在不同场景的普适性。

图3 竞赛得分情况

价值

——降低AI应用门槛,助力企业走上智能化快车道

根据目前消息,「深度赋智」已将该成果应用于其自研的天机自动机器学习平台,支持图像/音频/视频/文本/表格模态的任务和多个复杂AI场景,并计划向自动学习中引入更多数据集知识,提升搜索效率。

图4 搜索空间设计示意

天机自动机器学习平台是「深度赋智」产业智能化的前沿创新技术应用之一,已为零售/鞋服、工业、交易平台、金融等行业的多个头部客户提供了相应服务。

在天机自动机器学习平台的帮助下,无需花费高额的成本打造工程师团队,有效避免AI应用成本高、周期长、效果难以保障等问题,降低时间成本和机会成本,助力企业走上智能化快车道,提升综合竞争力。

在使用体验上,用户无需深入掌握数据知识,就能建立高质量的人工智能模型;无需深入学习编程知识,就能建立整套生产级人工智能应用,即使算法小白也能玩转AI,实现事半功倍的效果。平台从数据、模型、部署等多个方面进行了打磨,内含近百模块组件,涉及内容理解,计算机视觉,音频分析和数据预测等多领域国内顶尖方案,通过自动机器学习技术进行组件的衔接与调优,将复杂方案定制的成本降低到1%,克服了传统AI产品的落地周期长、效果迭代久、投入产出比低的瓶颈,为用户实现了超过60%的人力成本节约和显著的净利率提升。

图5 全自动AI中台=AI中台+Full-AutoML

2021年1月,工信部印发《工业互联网创新发展行动计划(2021-2023年)》指出,要进一步完善新型基础设施、彰显融合应用成效、提升技术创新能力、健全产业发展生态和增强安全保障能力。智能化制造和个性化定制等新模式新业态的广泛普及是融合应用成效的关键,智能化成为“新三年”的核心工作目标。

人工智能行业即将迎来政策红利大年,充满新的产业图景、新的机遇和挑战 。目前「深度赋智」已经汇聚了国内外高校顶尖人才,行内资深研究员、架构师,以SaaS产品提供端到端AI服务,具有丰富的行业赋能经验,在2B/2C领域均有千亿级数据的复杂AI场景定制与落地案例。在未来一段时间,将会充分发挥自己丰富的算法资源、深度的技术合作支持、不断完善的生态资源等优势,不断完善MetaAI技术,持续建设全自动机器学习平台,与更多开发者、服务商一起面向终端客户推出更多的AI解决方案。

相关文章:

oracle 导入数据

1.在数据库中建立实例数据库之后,运行cmd 2.键入 imp空格(实例数据库名)/(实例数据库口令)空格file“拖入数据地址” 比如czt.dmp文件直接拖进去(空格)fully 3.按enter建转载于:https://www.cnblogs.com/dieyaxianju/p/3593522.html

C#隐藏手机号中间四位为*

使用正则:Regex.Replace(手机号, "(\\d{3})\\d{4}(\\d{4})", "$1****$2"); 效果:

FTP命令大全

文件传输软件的使用格式为&#xff1a;FTP<FTP地址>&#xff0c;若连 接成功&#xff0c;系统将提示用户输入用户名及口令&#xff1a;LOGIN&#xff1a; (输入合法的用户名或者“ANONMOUS”)&#xff1a;PASSWORD&#xff1a; (输入合法的口令&#xff0c;若以“ANONMOU…

ecshop 缓存

2019独角兽企业重金招聘Python工程师标准>>> 1、加缓存&#xff1a; if ($act list) {$cache_id event_list;/* 如果没有缓存&#xff0c;生成缓存 */if (!$smarty->is_cached(event.dwt, $cache_id)){$smarty->assign(page_title, 限量抢购_.$GLOBALS[_CFG…

打造数字原生引擎,易捷行云EasyStack发布新一代全栈信创云

作为新基建的基石&#xff0c;信息技术应用创新产业正迎来黄金发展期。作为企业数字化转型的核心平台, 信创云对下承载包括芯片、整机、操作系统等软硬件基础设施&#xff0c;对上支撑大数据、人工智能、物联网、5G等新一代企业级应用&#xff0c;在整个信创产业链体系中起到承…

第一章 软件自动化测试的基础知识

测试工具以及测试方法并不能代表自动化测试&#xff0c;大多数人提到自动化测试&#xff0c;都会说会使用什么工具或者什么技术&#xff0c;这完全是错误的&#xff0c;和我在刚接触的时候一样&#xff0c;以为掌握了Selenium/QTP就以为自己是一名自动化测试工程师了&#xff0…

Request.ServerVariables获取环境变量

Request.ServerVariables("HTTP_X_FORWARDED_FOR") 透过代理服务器取得客户端的真实IP地址&#xff0c;有些用此方法读取到的仍然是代理服务器的IP。还有一点需要注意的是&#xff1a;如果客户端没有通过代理服务器来访问&#xff0c;那么取到的值将是空的。 Request…

Java虚拟机JVM学习06 自定义类加载器 父委托机制和命名空间的再讨论

Java虚拟机JVM学习06 自定义类加载器 父委托机制和命名空间的再讨论 创建用户自定义的类加载器 要创建用户自定义的类加载器&#xff0c;只需要扩展java.lang.ClassLoader类&#xff0c;然后覆盖它的findClass(String name)方法即可&#xff0c;该方法根据参数指定的类的名字&a…

腾讯千帆战略升级,推出企业应用连接器

4月26日&#xff0c;腾讯在北京举行“2021腾讯千帆战略发布会”&#xff0c;解读其SaaS生态战略&#xff0c;并面向行业和客户发布了“企业应用连接器”。 2019年&#xff0c;腾讯发布千帆计划1.0&#xff0c;两年之后&#xff0c;这个涵盖腾讯SaaS生态的计划已经进化到2.0。与…

游戏角度分析产品

2019独角兽企业重金招聘Python工程师标准>>> 游戏角度分析 1:减少用户时间成本 - 碎片化的时间可玩 2:减少用户学习成本 - 操作够简单 3:增强用户的范围 - 操作够简单 -> 儿童,女生大量增加 4:增强用户骚浪体验 - 炫耀的快感 5:增强游戏物品的稀确性 - 花钱也买不…

EXCEL数据导入数据库

1、类设计&#xff0c;EXCEL要据配置读入DATASET using System;using System.Data;using System.Collections;using System.Data.OleDb; namespace HKH.Common{ /// <summary> /// Excel 表格中 列标头 与 列索引 的对应转换 /// </summary> /// <remarks>…

免费正则表达式辅助工具(转)

免费正则表达式辅助工具 前段时间由于工作需要&#xff0c;学了一天的正则表达式&#xff0c;发现正则表达式功能实在是强大&#xff0c;但是也很奇怪&#xff0c;刚接触会很不习惯。我不需要很深入地了解&#xff0c;所以也没学多久&#xff0c;不过找了几款很不错的免费的正则…

@所有人,CSDN 粉丝专属福利来啦!

属于CSDN粉丝专属福利来了&#xff01;不一样的专属福利&#xff0c;只属于少数人的免费计算资源&#xff01;即日起&#xff0c;并行科技联袂CSDN针对社区粉丝&#xff0c;推出“免费算力限时领”活动&#xff0c;新用户填写表单&#xff0c;即可获得“5000核时CPU或500元卡时…

算法:快速排序实现 定制比较函数

1. 快速排序基本算法 1 #include<stdio.h>2 const static int NUM 47; 3 4 int quick_sort(int *a, int start, int end){5 if (start > end) 6 return 0; 7 8 int partition a[start]; //分割点value, 设置为第一个点.最后patition点设置为这个…

人民币大小写转换

using System;using System.Text;using System.Text.RegularExpressions; namespace HKH.Common{ /// <summary> /// 人民币大小写格式转换 /// </summary> /// <remarks> Create By Lwt on 2006/09/23 /// </remarks> public class clsRMB { privat…

冒泡排序(java实现)

冒泡排序&#xff0c;就是每次遍历都会把最小(或者最大)的数放在前面。比如要升序{A1,........An} 第一次排序要取出整个数组中最小放在A1的位置&#xff0c;从An开始往前遍历&#xff0c;相邻两个数比较&#xff0c;如果Aj < Aj-1 则换位。知道比较到A1 这一趟完事之后 A…

好看又好用的 GUI,你需要这七个 Python 必备库,

来源 | 法纳斯特头图 | 下载于ICphotoGUI(图形用户界面)&#xff0c;顾名思义就是用图形的方式&#xff0c;来显示计算机操作的界面&#xff0c;更加方便且直观。与之相对应的则是CUI(命令行用户交互)&#xff0c;就是常见的Dos命令行操作&#xff0c;需要记忆一些常用的命令&a…

总结PHP 7新增加的特性

?? 运算符&#xff08;NULL 合并运算符&#xff09; 把这个放在第一个说是因为我觉得它很有用。用法&#xff1a; $a $_GET[a] ?? 1;它相当于&#xff1a; <?PHP $a isset($_GET[a]) ? $_GET[a] : 1; 我们知道三元运算符是可以这样用的&#xff1a; $a ?: 1但是这是…

谈“云”色变?近80%企业曾遭受数据泄露

出品 | 《大咖来了》 一边是企业上云这一毋庸置疑的发展趋势&#xff0c;但另一边&#xff0c;云数据泄露事件的频繁&#xff0c;却让不少企业谈“云”色变。 2020年2月&#xff0c;万豪酒店520万客人信息被泄露&#xff0c;英国信息专员办公室(ICO)对其进行了1840万英镑(约1.…

C语言的32个关键字

C语言的关键字共有32个&#xff0c;根据关键字的作用&#xff0c;可分其为数据类型关键字、控制语句关键字、存储类型关键字和其它关键字四类。1 数据类型关键字&#xff08;12个&#xff09;&#xff1a; (1) char &#xff1a;声明字符型变量或函数 (2) double &#xff1a;声…

Python中线程Timeout的使用

Python中关于Timeout有另一种用起来更简便的方法&#xff0c;即使用装饰器。这种方式是使用sys模块的settrace等方法重构了python的threading类&#xff1a;#!/usr/bin/python import threading import sys class KThread(threading.Thread):"""Subclass of thr…

Vue的模板语法学习

模板语法 1、插值 a、文本 数据绑定最常见的形式就是使用 “Mustache” 语法&#xff08;双大括号&#xff09;的文本插值 我们在普通插值的时候无论何时&#xff0c;绑定的数据对象上 msg 属性发生了改变&#xff0c;插值处的内容都会更新 【案例】 <div id"app"…

求二维数组中最大子数组的和

任国庆 张博 之前我们讨论了在一维数组中求最大子数组的和&#xff0c;在此基础上我们开始讨论二维数组的最大子数组。 求二维数组的最大子数组思想是建立在以为数组。首先将数组的第一列看成一个一维数组&#xff0c;找到该列的最大子数组的值&#xff0c;然后将第二列与第一…

赠书 | 详解 4 种爬虫技术

作者 | 赵国生 王健来源 | 大数据DT头图 | 下载于视觉中国前言&#xff1a;聚焦网络爬虫是“面向特定主题需求”的一种爬虫程序&#xff0c;而通用网络爬虫则是捜索引擎抓取系统&#xff08;Baidu、Google、Yahoo等&#xff09;的重要组成部分&#xff0c;主要目的是将互联网上…

nginx 通过proxy_next_upstream实现容灾和重复处理问题

proxy_next_upstream指令语法: proxy_next_upstream error | timeout | invalid_header | http_500 | http_502 | http_503 |http_504 |http_404 | off ...; 默认值: proxy_next_upstream error timeout; 上下文: http, server, locationerror # 和后端服务器建立连接时&…

javascript身份证号码验证函数支持带x

//--身份证号码验证-支持新的带x身份证functionisIdCardNo(num) { varfactorArr newArray(7,9,10,5,8,4,2,1,6,3,7,9,10,5,8,4,2,1); varerror; varvarArray newArray(); varintValue; varlngProduct 0; varintCheckDigit; varintStrLen num.length; v…

「AI 质检员」在富士通上岗,效率比人工高 25%

日本第一 IT 厂商富士通&#xff0c;于近日宣布开发了用于检测产品外观异常的 AI 技术&#xff0c;从而节省人力成本、材料成本等&#xff0c;同时也可节省声誉损失和退货/召回相关的成本&#xff0c;「无人工厂」已来。来源 | Hyper超神经责编 | 寇雪芹头图 | 下载于视觉中国去…

asp在线压缩和解压缩文件(文件夹)

asp在线压缩和解压缩文件&#xff08;文件夹&#xff09; <%\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\\ 1. c:\windows\system32\cmd.exe\\ 拷贝把本文件所在的路径\\\\ 2. 把 c:\program\winrar\rar.exe\\ 拷贝把本文件所在的路径 并改名为WinRAR.e…

SpringMVC + Hibernate-Validator 参数校验

2019独角兽企业重金招聘Python工程师标准>>> 前言&#xff1a; Web开发中&#xff0c;最为常见的场景就是前端表单数据、Json数据与后端实体类的绑定&#xff0c;即使JS能校验并阻止大部分的必填漏填的风险&#xff0c;但并不能防止恶意破坏者修改脚本。因此后端参数…

深入浅出,机器学习该怎么入门?

来源 | 算法进阶责编 | 寇雪芹头图 | 下载于视觉中国前言&#xff1a;机器学习作为人工智能领域的核心组成&#xff0c;是计算机程序学习数据经验以优化自身算法&#xff0c;并产生相应的“智能化的”建议与决策的过程。一个经典的机器学习的定义是&#xff1a;A computer prog…