Kubecon 2017大会Google高级产品经理David Aronchick访谈：机器学习和Kubernetes
\\\看新闻很累？看技术新闻更累？试试下载InfoQ手机客户端，每天上下班路上听新闻，有趣还有料！
\
在德克萨斯州奥斯汀市举办的Kubecon大会已于近日闭幕，会议吸引了超过4000名工程师，Kubernetes成为了大会最热门的主题。由于工作负载的本质和训练算法中典型繁重计算的需求，机器学习话题和它与Kubernetes的协同作用在许多会议上都讨论过。
\\Kubeflow平台使得Kubernetes上的机器学习简单，便携和可扩展，它主要通过提供manifests来创建：
\\- JupyterHub，以实现和管理Jupyter笔记本；\\t
- 同时适配CPU和GPU的Tensorflow训练控制器；\\t
- Tensorflow服务容器。\
InfoQ有幸邀请到David Aronchick就相关问题进行了访谈，David Aronchick不仅是Google的产品经理，也是Kubeflow的主导者。他在Kubecon 2017大会上着重展示了Kubernetes和机器学习的协同作用。
\\InfoQ：机器学习在Kubecon大会上获得了很大关注，有什么特别的原因吗？
\\\\\Aronchick：毫无疑问，机器学习正改变着几乎所有产业的商业模式。在这么大的场合，有那么多的听众，或者说有那么多的行业顶尖人才齐聚一堂来探讨技术的未来，大家总会提到最新的技术趋势和进展。超过4000多名的Kubecon大会参会者不仅想了解别人所从事的尖端机器学习，也想知道他们是怎么运用这些新技术来改善自己的流程的。
\\这也就是说，许多新项目都跳出了原有的框架，同时还有不少的改变。实际上，之前的许多公告都说过有完整的机器学习堆栈。我想说我们首先要转换的一个思维是，Kubernetes上的机器学习不仅仅是指未来的事情，它其实是一个现当下的事情。
\
InfoQ：您能描述一下机器学习和Kubernetes之间的全面协同过程吗？
\\\\\Aronchick：对于现存大量数据的使用来说，机器学习是一个新方法，同时它也能拿出比以前更准确、更快的方案来解决业务问题。但是，机器学习解决方案的基础架构支持(大多数都相当复杂)仍然比较新，需要大量的自定义脚本、依赖项分析和兼容性问题等。而且，机器学习栈堆通常部署在多个位置(用于开发、训练和生产)，保持每个节点的同步使得使用机器学习这个挑战更艰难。
\\为帮助大规模地部署和运行这些机器学习平台，Kubernetes提供了一个通用的平台。凭借在多个云环境中运行的丰富编排，Kubernetes为数据科学家、开发人员和IT专业人员提供了一种简单的方法来部署、运行和管理复杂的、多服务的机器学习工作负载。
\
InfoQ：与使用Kubeflow相比，通过Helm图表在Kubernetes上安装机器学习工具有什么不同呢？
\\\\\Aronchick： 机器学习工具的实际安装是通过封装系统完成的。目前，Kubeflow正在使用ksonnet，我们仍然希望它可以支持多种不同的部署技术。Kubeflow的价值更多在于用简单的方式使大量的工具共同运行得更好。我们也在评估所有其他的选项，包括helm和ksonnet等等，但是，我们想在安装时为用户提供一组更丰富的对象，以确保所涉及的多个包能够很好地共同运行，并且立即可用。
\
InfoQ：假设我是一名机器学习/数据科学家，Kubeflow会如何简化我的日常工作，而不是通过添加Kubzernetes层来使之复杂化？
\\\\\Aronchick：因为Kubernetes提供部署对象和服务端点，如果你是一个数据工程师，这也就意味着你只需要关注和你相关的点，也就是解决数据问题。我们不希望、也不需要数据科学家为了使用Kubeflow去安装复杂的Kubernetes设置。在你的笔记本电脑上，你可能需要使用minikube。在你的本地集群上，你可能需要使用由你的组织所提供的Kubernetes安装。在云端，你可以使用托管的Kubernetes提供程序（provider）。在每种情况下，你都只能看到一条安装Kubeflow的指令，按需安装之后你就可以看到你所熟悉的Tensorflow服务和Jupyter笔记本了。
\
InfoQ：关于机器学习工具包的基础架构支持如何被集成为Kubeflow这一点，您能给我们再详述一下技术细节吗？
\\\\\Aronchick：因为我们正在使用本地的Kubernetes工具，对现有部署包的集成是相当简单的。我们是以一个社区的形式来提供各种各样的选择的，但有的人可能喜欢其他的直接介入的机器学习工具包，因为他们最了解他们的平台（我们现在也正在与其他的团队接洽）。关于下一个我们将要添加的工具包将会是什么这个问题，我们在Github repo上进行了一些讨论，但总体来说，我们是愿意为用户提供帮助的。
\
InfoQ：社区是如何支持Kubeflow的呢？还有Kubeflow的发展蓝图是什么呢，会不会加入针对类似Cloud Foundry和OpenShift等平台的支持？
\\\\\Aronchick： Kubeflow是本地的Kubernetes，而且我们正致力于确保这种情况继续下去。这也就意味着在我们的计划中我们将一直支持和Kubernetes相一致的任何平台，也包括Cloud Foundry和本地OpenShift（Red Hat已经加入我们的项目了）。我们也已经对外公布了与Canonical/Ubuntu，Weaveworks，Caicloud以及许多其他平台提供商的合作。我们非常重视无所不在的机器学习堆栈的价值，也努力确保Kubeflow能够满足每一个数据科学家的需要，随时随地提供服务。
\
如果想了解主会场演讲和其他记录，可前往Kubecon的日程页面获取。
\\查看英文原文：Q\u0026amp;A on Machine Learning and Kubernetes with David Aronchick of Google from Kubecon 2017
\\感谢罗远航对本文的审校。
\\给InfoQ中文站投稿或者参与内容翻译工作，请邮件至editors@cn.infoq.com。也欢迎大家通过新浪微博（@InfoQ，@丁晓昀），微信（微信号：InfoQChina）关注我们。
相关文章：
【Qt】Qt程序查看动态链接库（windows）
windows下使用dumpbin查看Qt程序运行时需要链接的动态库 打开终端 打开Qt自带的MSVC终端 如：Qt 5.10.0 64-bit forDesktop(MSVC 2017) 查看dumpbin命令 dumpbin微软官网说明 https://docs.microsoft.com/zh-cn/cpp/build/reference/dumpbin-options 直接输入命令dumpbin…
MSN 无法登录 错误代码 8007007e
故障原因： 发生这个错误的原因是一些朋友在网上下载了独立MSN提取包版本进行安装的，因为这个提取包只包含了Windows Live Messenger 2009，却缺少Windows Live Communications Platform，所以造成无法登录的问题。 解决办法…
你不知道的Vue响应式原理
文章首发于github Blog。 本文根据Vue源码v2.x进行分析。这里只梳理最源码中最主要的部分，略过非核心的一些部分。响应式更新主要涉及到Watcher，Dep，Observer这几个主要类。 本文主要弄清楚以下几个容易搞混的问题： Watcher&#…
优秀开发者必备技能包：Python调试器
作者 | Roky0429 来源 | Python空间（ID:Devtogether） 人工智能的现状及今后发展趋势如何？ https://edu.csdn.net/topic/ai30?utm_sourcecsdn_bw 写在之前 不管是之前搞 acm 用 c/c 写算法还是后来用 Python 写代码，我发现在程…
【Qt】dumpbin详解
dumpbin简介 DUMPBIN是在Windows平台下用于显示COFF格式文件信息的一个命令行工具。你可以使用DUMPBIN去显示COFF格式的文件信息，比如像vc编译器生成的目标文件（obj），可执行文件（exe）和动态链接库…
感悟Windows7
Win7已经逐渐在中国电脑用户中普遍起来，绝大多数人对其新增的功能很升级的功能都很是好评，接下来就将简略总结一下我对此系统使用的一些感想。 l 界面更加体现以人为本的思想。更加赏心悦目并且选择更加多元化。比如桌面小工具就有了更多的选择并且还可…
【Qt】Qt5在ubuntu16.04无法输入中文解决方式
参考博客 https://blog.csdn.net/linux_2016/article/details/52356576 博客中没有修改库的执行权限 解决方法 安装：fcitx-frontend-qt5 sudo apt-get install fcitx-frontend-qt5 拷贝动态库到Qt安装目录下的两个目录中 cp /usr/lib/x86_64-linux-gnu/qt5/p…
拿下中科大的计算机课程全靠它了！
整理 | 琥珀 出品 | AI科技大本营（ID: rgznai100） 人工智能的现状及今后发展趋势如何？ https://edu.csdn.net/topic/ai30?utm_sourcecsdn_bw 中国科学技术大学，简称“中科大”，是国内有名的 985、211 重点高校。近年…
【阿里Q3财报：阿里云去年营收破百亿，亚洲市场遥遥领先】
2月1号晚间，阿里巴巴公布2018财年第三季度财报，阿里云保持持续强劲的增长，季度营收同比增长104%到35.99亿元。2017年累计营收突破百亿，达112亿，这是国内首次出现百亿规模的云计算服务商，在亚洲市场遥遥领先…
“神仙”打架，“凡人”遭殃
神仙是啥？古时神话时代举手翻江倒海的人物啊，那神仙打架是啥后果，相信大家心里都有个底吧。那现代社会的“神仙”是啥？那就是有钱有权的大人物或者商家，那真是让咱仰望的对象啊~ 话说最近这360跟QQ的巅峰对决&am…
120种小狗图像傻傻分不清？用fastai训练一个分类器
作者：一杯奶茶的功夫 链接：https://www.jianshu.com/p/ab35ed21df87 程序员转行学什么语言？ https://edu.csdn.net/topic/ai30?utm_sourcecsdn_bw 这篇文章会讲解如何制作能够分类120种小狗的图像分类器。 这篇文章中所讲述的内容都是基于…
View_01_LayoutInflater的原理、使用方法
View_01_LayoutInflater的原理、使用方法 本篇博客是郭神博客Android视图状态及重绘流程分析，带你一步步深入了解View（一）的读书笔记的笔记。 LayoutInflater简单介绍 setContentView()内部是使用LayoutInflater来完毕载入布局的。setContent…
【ubuntu】在ubuntu下无法输出拼音输入法中的中括号“【” 和 “】”的解决方法
问题 在新装的ubuntu16.04中，打不出中括号【】，而变成 “”和“「” 解决方法 修改文件/usr/share/fcitx/data/punc.mb.zh_CN sudo vi /usr/share/fcitx/data/punc.mb.zh_CN将18、19行改为如下内容 18 [ 【 19 ] 】
配置数据源和分页
1.tomcat的版本，最好不要是安装版的，要解压缩的，不然无法连接数据源。2.conf》context.xml<Resource name"hotel" auth"Container" type"javax.sql.DataSource" driverClassName"oracle.jdbc.…
售价1万7的华为Mate X很贵吗？
整理 | 琥珀 出品 | AI科技大本营（ID: rgznai100） 60s测试：你是否适合转型人工智能？ https://edu.csdn.net/topic/ai30?utm_sourcecxrs_bw 继三星之后，网友们期待已久的华为终于忍不住宣布了一系列重磅消息ÿ…
【C】数组数组初始化总结
C数组初始化总结 发现一个新方法，可以分段初始化数组 eg：int arrayC[MAX_LEN] {[1 … 5]9, [6 … 9] 8}; 代码如下 #include <stdio.h> #define MAX_LEN 10int main (int argc, char *argv[]) { //不初始化，参数值随机分配 //[0][0…
Golang的反射reflect深入理解和示例
[TOC] Golang的反射reflect深入理解和示例 【记录于2018年2月】 编程语言中反射的概念 在计算机科学领域，反射是指一类应用，它们能够自描述和自控制。也就是说，这类应用通过采用某种机制来实现对自己行为的描述（self-representati…
如何读取多个文件，文件后缀名不一致，不过类似source.1 source.2 source.3等
#include <stdio.h> #include <stdlib.h> //为了使用exit() char *itoa(int num,char *str,int radix); int main() { int ch; FILE* fp; // char fname[50]"scan1.source.2100"; //用于存放文件名 char fname[20]"source."; …
AtCoder Petrozavodsk Contest 001
第一场apc，5H的持久战，我当然水几个题就睡了 A - Two Integers Time limit : 2sec / Memory limit : 256MB Score : 100 points Problem Statement You are given positive integers X and Y. If there exists a positive integer not greater than 1018…
【Qt】使用QCamera获取摄像头，并使用图像视图框架QGraphics*来显示
代码下载 https://download.csdn.net/download/u010168781/10373174 #####头文件 #ifndef CAMERATEST_H#define CAMERATEST_H#include <QMainWindow> #include <QGraphicsView> #include <QKeyEvent> #include <QTimer>namespace Ui { class Camera…
CVPR 2019收录论文ID公开，你上榜了吗？
整理 | 琥珀 出品 | AI科技大本营（ID: rgznai100） 计算机视觉和模式识别大会 CVPR（Conference on Computer Vision and Pattern Recognition）作为人工智能领域计算机视觉方向的重要学术会议，每年都会吸引全球最顶尖的…
什么是 prelink
2019独角兽企业重金招聘Python工程师标准>>> Most programs require libraries to function. Libraries can be integrated into a program once, by a linker, when it is compiled (static linking) or they can be integrated when the program is run by a load…
PythonR爬取分析赶集网北京二手房数据（附详细代码）
本文转载自数据森麟（ID:shujusenlin） 作者介绍：徐涛，19年应届毕业生，专注于珊瑚礁研究，喜欢用R各种清洗数据。 知乎：parkson 如何挑战百万年薪的人工智能！ https://edu.csdn.net/t…
【Qt】QCloseEvent的使用小结
问题描述 在程序中使用QCloseEvent时，有时没有反应，没有关闭程序。 原因 经测试只有在界面起来以后，使用event->accept()才能关闭程序 测试如下 在构造函数中调用close() 在构造函数中调用close()时，会触发QCloseEvent事件，但是程序界面没有关闭。 使用按钮触发…
Java反射 - 私有字段和方法
尽管普遍认为通过Java Reflection可以访问其他类的私有字段和方法。 这并不困难。 这在单元测试中可以非常方便。 本文将告诉你如何。 访问私有字段 要访问私有字段，您需要调用Class.getDeclaredField（String name）或Class.getDeclaredFields…
.Net 程序员面试 C# 语言篇 (回答Scott Hanselman的问题)
过去几年都在忙着找项目，赶项目，没有时间好好整理深究自己在工作中学到的东西。现在好了，趁着找工作的这段空余时间，正好可以总结和再继续夯实自己的.Net, C#基本功。在05年的时候，Scott Hanselman(微软的一个Principa…
一个小小的AI训练营竟然卧虎藏龙
年前，我来到了一个近墨者黑的地方，黑的不能再黑。。。这个神秘的组织叫做 21 天入门机器学习训练营。讲真的，当初报名这个训练营，我是冲着机器学习来的，主要是好奇想转型，而且听说这个课程对小白很友好&…
【Qt】QCamera查询和设置摄像头的分辨率
查询和设置摄像头分辨率的API QCamera::supportedViewfinderResolutions() QCamera::setViewfinderSettings() 设置摄像头帧率、比例、分辨率、格式的类：QCameraViewfinderSettings 使用注意事项 查询和设置摄像头分辨率时，需要在摄像头启动后调用&a…
附录G Netty与NettyUtils
版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/beliefer/article/details/77450134 注：本文是为了配合《Spark内核设计的艺术 架构设计与实现》一书的内容而编写，目的是为了节省成本、方便读者查阅。…
grails日志系统的研究
对于grails的日志输出，我真的是给弄吐血了。开始以为很简单，后来发现grails封装log4j做的有点太多了，很多东西的封装理解了觉得还挺合理，但是不理解的话真是无比迷茫。对于是否有必要做这么多强制性约束，我保留意见...…