【Python】深度学习中将数据按比例随机分成随机 训练集 和 测试集的python脚本
深度学习中经常将数据分成 训练集 和 测试集，参考博客，修改python脚本
randPickAITrainTestData.py 。
功能：从 输入目录 中随机检出一定比例的文件或目录，移动到保存 测试集目录 中，原输入目录作为训练目录。
import os, random, shutil
import sys, getopt
import stringdef getDir(argv):trainPath = ''testPath = ''rate=0.1try:opts, args = getopt.getopt(argv,"hi:o:r:",["ipath=","opath=","rate="])except getopt.GetoptError:print('<cmd> -i <trainPath> -o <testPath> -r <rate>')sys.exit(2)for opt, arg in opts:if opt == '-h':print('<cmd> -i <trainPath> -o <testPath>')sys.exit()elif opt in ("-i", "--ipath"):trainPath = argelif opt in ("-o", "--opath"):testPath = argelif opt in ("-r", "--rate"):rate = argreturn trainPath, testPath, ratedef moveFile(trainDir, testDir, rate):rate=float(rate)pathDir = os.listdir(trainDir)filenumber=len(pathDir)print("filenumber = ", filenumber)picknumber=int(filenumber*rate)print("picknumber = ", picknumber)sample = random.sample(pathDir, picknumber)for name in sample:shutil.move(os.path.join(trainDir,name), os.path.join(testDir,name))returnif __name__ == '__main__':train, test, rate = getDir(sys.argv[1:])if not os.path.isdir(train):print("输入路径不存在：", train)sys.exit()if not os.path.isdir(test):print("输出路径不存在：", test)sys.exit()tmp = float(rate)if tmp<=0.0 or tmp>=1.0:rate = 0.1print('输入的文件为：', train)print('输出的文件为：', test)print('捡出比例为：', rate)moveFile(train, test, rate)
相关文章：
docker 系列之 配置阿里云镜像加速器
1.登录阿里云 2.登录后找到右上角的“管理中心”,点击进入后》点击“镜像加速器”;剩下的安装文档配置就好 问题1：配置完后还是提示：Tag latest not found in repository 【本人也是在这里被困了好久,尝试了各种方法】 解决方案：最后发现这里…
LVM-HOWTO/学习笔记(二)
1. 在3块scsi磁盘上创建lv Run pvcreate on the disks # pvcreate /dev/sda # pvcreate /dev/sdb # pvcreate /dev/sdc Create a volume group # vgcreate my_volume_group /dev/sda /dev/sdb /dev/sdc/ Run vgdisplay to verify volume group # vgdisplay # vgdisplay…
【python】使用python脚本将LFW数据中1672组同一个人多张照片拷贝出来
使用python脚本将LFW数据中1672组同一个人多张照片拷贝出来 dataCleaning4multiple.py 源码如下： import os, random, shutil import sys, getopt import stringdef getDir(argv):inPath outPath num2try:opts, args getopt.getopt(argv,"hi:o:n:",[&…
EXP6 信息搜集与漏洞扫描
1.实验有关问题 （1）哪些组织负责DNS，IP的管理。 ICANN是一个集合了全球网络界商业、技术及学术各领域专家的非营利性国际组织，负责在全球范围内对互联网唯一标识符系统及其安全稳定的运营进行协调，它能决定域名和IP地址…
百度发的208亿春晚红包，靠这样的技术送到了你手上 | 解读
2019 年的春晚红包项目对百度而言是一次大考，背后需要强大的技术来支撑。如你所见，百度不负“技术大厂”的标签，春晚红包期间系统稳定运行，没有出现宕机事故。在这样一个庞大而复杂的项目面前，他们是如何去用技术去化解…
一步一步学Silverlight 2系列（10）：使用用户控件
概述 Silverlight 2 Beta 1版本发布了，无论从Runtime还是Tools都给我们带来了很多的惊喜，如支持框架语言Visual Basic, Visual C#, IronRuby, Ironpython，对JSON、Web Service、WCF以及Sockets的支持等一系列新的特性。《一步一步学Silverlig…
何恺明的GN之后，权重标准化新方法能超越GN、BN吗？ | 技术头条
点击上方↑↑↑蓝字关注我们~「2019 Python开发者日」，购票请扫码咨询 ↑↑↑作者 | Siyuan Qiao、Huiyu Wang、Chenxi Liu、Wei Shen、Alan Yuille（Johns Hopkins University，约翰霍普金斯大学）译者 | 刘畅编辑 | Jane出品 | AI科…
【AI】CelebA数据介绍、下载及说明
1、简介 CeleA是香港中文大学的开放数据，包含10177个名人的202599张图片 官网：http://mmlab.ie.cuhk.edu.hk/projects/CelebA.html 下载地址（百度网盘，官方的）：http://pan.baidu.com/s/1eSNpdRG 【python】…
Zend Framework Mail通过网易免费邮箱发送邮件
2019独角兽企业重金招聘Python工程师标准>>> 做为一个苦逼的个人站长，做一个小网站，本来愿意来看的人就不多，再弄一个不能找回密码的会员系统？基本上被判死刑了 。阿里云的短信也要钱啊，而且只支持PHP 5.5以…
将shp导入SDE中出现“表或视图不存在”问题
其原因是权限不够，下边代码可以用来检查权限是否够。 private void ESRILicense() { IAoInitialize mAoInitialize new AoInitializeClass(); esriLicenseStatus licenseStatus (esriLicenseStatus)mAoInitialize.IsProductCodeAvai…
【python】使用python脚本将CelebA中同一人的图片捡到对应单独的文件夹中
1、目的 CelebA的所有的照片都在一个文件夹中，为了能在dlib训练人脸识别时，方便使用，将CelebA中同一人的图片捡到对应单独的文件夹中。 【AI】CelebA数据介绍、下载及说明 2、方法 首先创建10178个目录，然后解析Anno/identity_…
仅用语音，AI就能“脑补”你的脸！ | 技术头条
点击上方↑↑↑蓝字关注我们~「2019 Python开发者日」，购票请扫码咨询 ↑↑↑作者 | Wav2pix 研究团队译者 | 刘畅编辑 | Jane出品 | AI科技大本营（公众号id：rgznai100）【导语】之前我们为大家介绍过一项非常酸爽的研究“Talking…
如何在SAP云平台上使用MongoDB服务
首先按照我这篇文章在SAP云平台上给您的账号分配MongboDB服务：如何在SAP云平台的Cloud Foundry环境下添加新的Service 然后从这个链接下载SAP提供的例子程序。 1. 使用命令行 cf marketplace查看当前SAP云平台的MongoDB的版本号：在我使用的SAP云平台上是…
C#中将dll汇入exe，并加壳
< DOCTYPE html PUBLIC -WCDTD XHTML StrictEN httpwwwworgTRxhtmlDTDxhtml-strictdtd> 1、合并file1.dll、file2.dll到destination.dll ILmerge /ndebug /target:dll /out:C:\destination.dll /log C:\file1.dll C:\file2.dll 2、合并file1.dll、file2.dll以及myApp.exe…
【AI】dlib中图像标注工具 imglab 详细说明
一、基本用法 imglab是一个在图像上标注矩形的工具。基本方法 1> 获取图片列表：./imglab -c mydataset.xml /tmp/images，/tmp/images为保存图像的文件夹 2> 标注每个图片：./imglab mydataset.xml，使用shift鼠标左键拖动来选…
最萌算法学习来啦，看不懂才怪！| 码书
普通程序员，不学算法，也可以成为大神吗？对不起，这个，绝对不可以。可是算法好难啊~~看两页书就想睡觉……所以就不学了吗？就一直当普通程序员吗？如果有一本算法书，看着很轻松……又有…
Redis 缓存设计原则
基本原则 只应将热数据放到缓存中 所有缓存信息都应设置过期时间 缓存过期时间应当分散以避免集中过期 缓存key应具备可读性 应避免不同业务出现同名缓存key 可对key进行适当的缩写以节省内存空间 选择合适的数据结构 确保写入缓存中的数据是完整且正确的 避免使用耗时…
最强大,最简洁的【禁止输入中文】
方法一：禁止中文输入法 <input type"text" style"ime-mode:disabled">方法二：禁止黏贴，禁止拖拽，禁止中文输入法！这种方法是最强的禁止 中文输入 <input type"text" οnpaste…
无监督机器学习中，最常见4类聚类算法总结 | 技术头条
点击上方↑↑↑蓝字关注我们~「2019 Python开发者日」，购票请扫码咨询 ↑↑↑编译 | 安然、狄思云来源 | 读芯术（ID：AI_Discovery）在机器学习过程中，很多数据都具有特定值的目标变量，我们可以用它们来训练模…
自动红眼移除算法 附c++完整代码
说起红眼算法，这个话题非常古老了。 百度百科上的描述： “红眼”一般是指在人物摄影时，当闪光灯照射到人眼的时候，瞳孔放大而产生的视网膜泛红现象。 由于红眼现象的程度是根据拍摄对象色素的深浅决定的，如果拍摄对象的…
【Dlib】在GPU环境中运行dlib中的例子dnn_mmod_ex报错...dlib::cuda_error...Error while calling cudaMalloc...
1、问题描述 在GPU环境下运行dlib中的例子dnn_mmod_ex时，报错： terminate called after throwing an instance of dlib::cuda_errorwhat(): Error while calling cudaMalloc(&data, new_size*sizeof(float)) in file /home/laoer/tools/dlib/dlib…
Exchange 2010正式发布了
2009年11月9号，Exchange 2010正式发布了，下载地址：http://www.microsoft.com/downloa ... 0-879f-d74208d6171d简体中文64位120天试用版转载于:https://blog.51cto.com/287416363/657202
【python】使用python脚本将CelebA中图片按照 list_attr_celeba.txt 中属性处理（删除、复制、移动）
1、目的 CelebA中的照片有四十种属性，参见： 【AI】CelebA数据介绍、下载及说明 根据需求从celebA中获取我们想要的图片，方法是将CelebA中图片按照 list_attr_celeba.txt 中属性执行删除、复制或移动操作。 命令格式： python3 C…
firefly 编译opencv3.3.1, CMake报错
更换gcc编译器可以解决 -D CMAKE_C_COMPILER/usr/bin/gcc-4.8转载于:https://www.cnblogs.com/gabrialrx/p/9001554.html
AI时代，为何机器人公司无法盈利只能走向倒闭？
点击上方↑↑↑蓝字关注我们~「2019 Python开发者日」，购票请扫码咨询 ↑↑↑作者 | Bram Vanderborght译者 | 弯月责编 | 屠敏出品 | CSDN（ID：CSDNnews）导语：机器人专家需要公开诚实地讨论我们的成功，而不…
Google Objective-C Style Guide
看题目就知道了～哪天有空翻译成中文的～不多说了～上链接～Google Objective-C Style Guide转载于:https://blog.51cto.com/lulala/659124
ICPC 2019国际大学生程序设计竞赛，中国高校未能夺冠
点击上方↑↑↑蓝字关注我们~「2019 Python开发者日」，购票请扫码咨询 ↑↑↑整理 | 琥珀出品 | AI科技大本营（ID:rgznai100）一年一度的国际大学生程序设计竞赛（International Collegiate Programming Contest，ICPC&am…
完爆Facebook/GraphQL，APIJSON全方位对比解析(一)-基础功能
相关阅读： 完爆Facebook/GraphQL，APIJSON全方位对比解析(二)-权限控制 完爆Facebook/GraphQL，APIJSON全方位对比解析(三)-表关联查询 自APIJSON发布以来，不断有网友拿来和Facebook的GraphQL对比， 甚至有不少人声称“完…
【AI】吴恩达斯坦福机器学习中文笔记汇总
1、吴恩达机器学习和深度学习课程的字幕翻译以及笔记整理参见： 以黄海广博士为首的一群机器学习爱好者发起的公益性质项目（http://www.ai-start.com）。 2、黄海广博士公益项目介绍 https://www.jianshu.com/p/16a749e332db 3、吴恩达 斯坦…
【C++】C++命名空间重定向
参见博客： namespace使用总结 命名空间的重定向的格式： namespace newName oldName; 在caffe源码走读时，遇到namespace的重定向用法，以前没有用过，源码如下，其中 GFLAGS_GFLAGS_H_是为了检测gflags的版…