经验直达:
- 机器学习中特征工程详细过程
- 如何搭建python机器学习环境
- 计算机二级能用wps练吗
一、机器学习中特征工程详细过程
【如何搭建python机器学习环境 机器学习中特征工程详细过程】特征选择是特征工程中的重要问题(另一个重要的问题是特征提?。患涑K担菏莺吞卣骶龆嘶餮暗纳舷蓿?而模型和算法只是逼近这个上限而已 。由此可见,特征工程尤其是特征选择在机器学习中占有相当重要的地位 。通常而言,特征选择是指选择获得相应模型和算法最好性能的特征集,工程上常用的方法有以下:1. 计算每一个特征与响应变量的相关性:工程上常用的手段有计算皮尔逊系数和互信息系数,皮尔逊系数只能衡量线性相关性而互信息系数能够很好地度量各种相关性 , 但是计算相对复杂一些,好在很多toolkit里边都包含了这个工具(如sklearn的MINE),得到相关性之后就可以排序选择特征了;2. 构建单个特征的模型 , 通过模型的准确性为特征排序,借此来选择特征,另外,记得JMLR'03上有一篇论文介绍了一种基于决策树的特征选择方法,本质上是等价的 。当选择到了目标特征之后 , 再用来训练最终的模型;3. 通过L1正则项来选择特征:L1正则方法具有稀疏解的特性,因此天然具备特征选择的特性,但是要注意 , L1没有选到的特征不代表不重要,原因是两个具有高相关性的特征可能只保留了一个 , 如果要确定哪个特征重要应再通过L2正则方法交叉检验;4. 训练能够对特征打分的预选模型:RandomForest和Logistic Regression等都能对模型的特征打分,通过打分获得相关性后再训练最终模型;5. 通过特征组合后再来选择特征:如对用户id和用户特征最组合来获得较大的特征集再来选择特征,这种做法在推荐系统和广告系统中比较常见,这也是所谓亿级甚至十亿级特征的主要来源,原因是用户数据比较稀疏 , 组合特征能够同时兼顾全局模型和个性化模型,这个问题有机会可以展开讲 。6. 通过深度学习来进行特征选择:目前这种手段正在随着深度学习的流行而成为一种手段 , 尤其是在计算机视觉领域,原因是深度学习具有自动学习特征的能力 , 这也是深度学习又叫unsupervised feature learning的原因 。从深度学习模型中选择某一神经层的特征后就可以用来进行最终目标模型的训练了 。整体上来说,特征选择是一个既有学术价值又有工程价值的问题,目前在研究领域也比较热 , 值得所有做机器学习的朋友重视 。
二、如何搭建python机器学习环境
用Python来编写机器学习,因为Python下有很多机器学习的库 。
numpy,scipy,matplotlib,scikit-learn , 分别是科学计算包,科学工具集,画图工具包,机器学习工具集 。
numpy :科学运算,主要是矩阵的运算 。提供数组 。
scipy:主要是一些科学工具集,信号处理工具集数值计算 。
scikit-learn:大量机器学习算法 。
matplotlib:画图工具
Ubuntu 下的安装
sudo apt-get install python-numpy
sudo apt-get install python-scipy
sudo apt-get install python-matplotlib
sudo apt-get install python-sklearn
window 安装直接到网站下载exe文件,直接安装即可 。
三、计算机二级能用wps练吗
不可以 。
WPS和Office功能并不相同 , wps不属于计算机二级的考试范围 。计算机二级考试用的是标准版的Office2010,WPS没有对应的版本,不能与之很好的兼容 。
计算机二级考试包含:
语言程序设计 , 包括C、C、Java、Visual Basic、WEB程序设计;
数据库程序设计(包括VisualFoxPro、Access、MySql);
MS office高级应用包括Word、EXCEL、PPT办公软件高级应用 。
(注:二级Delphi科目从2013年上半年开始停考,只接受补考考生报名,不再接受新考生报名 。)二级C从2013年开始已从传统的笔试和上机考试改革成无纸化考试 。
扩展资料:
成绩评定流程
1、成绩评定流程如下:各级上机考试的成绩由考生交卷后由计算机直接评分给出,机器阅卷,并由考点汇总并与答题卡一起提交至北京 , 但是除了0分考生以外,考生无法当场得到具体的成绩 。
另外,一级考生、补考上机的考生将要和其余考生一样在当地的成绩公布日才能得到成绩;当北京方面将试卷评阅完毕后 , 会将各省的成绩合格信息汇总并发回给各省的主考部门,并由各省的主考部门来决定具体的成绩公布的时间 。
2、少部分考点将会通报考生的具体成绩分数,大部分考点及一般的查询方法将会通报考生的等级 。总成绩取笔试和上机成绩中最低的一个 。总成绩在及格及其以上者为通过考试 。
3、部分省市一级成绩查询时会报告“笔试不及格”,这是由于一级没有笔试,只要一级上机合格者即可获得一级合格证书 。
4、合格证书一般在考生当地公布成绩1个月后发放,具体时间视各地情况而略有不同 。单科合格成绩单的发放有地域性,具体发放单科证书问题请咨询当地考点 。
参考资料:百度百科-计算机二级