昨天在yarn集群上跑代码遇到这个问题，现在发现spark代码写好是重要的一方面，spark submit参数…

1、用./bin/spark-shell启动spark时遇到异常：java.net.BindException…

一年一度的ACM Recsys会议在9月份已经胜利闭幕，留下一堆slides和tutorials等着我们去学习…

今天刚打了一个jar包放在yarn集群运行报了错误，干脆整个文章记录所有遇到的问题 1、Lost Execut…

batch: batch是批。深度学习每一次参数的更新所需要损失函数并不是由一个{data：label}获得的…

前言 如果直接通过pip install tensorflow安装Tensorflow的话，在运行时可能会有这…

今年1月，Keras作者、谷歌AI研究员François Chollet在推特上发出召唤：讲中文的Keras用…

深度学习目前基本上已经被很多行业使用，博主每天也会逛技术论坛或者sf等网站都会对此有有很多的文章讨论，从工作以…

ACM（国际计算机学会）主办的推荐系统专场（Recsys）是推荐系统圈子的顶级会议，从2007年开始，至今已经…

Shuffle过程是MapReduce的核心，也被称为奇迹发生的地方。要想理解MapReduce， Shuff…

上一篇文章使用基于模型的方法进行特征选择，其中主要描述了使用正则项、lasso等方法实现的特征选择，这篇文章是…

上一篇讲解了使用基于递归消除法，从大范围来讲是通过wrapper的方法，中文就是包装的方法，递归消除是这其中主…

上一篇文章使用最大信息系数筛选特征，本篇使用递归消除法筛选特征。 递归消除法，首先递归肯定是要循环执行多次来筛…

上一篇使用卡方系数进行特征选择，使用的是假设检验的思路，这篇文章使用最大信息系数的方法进行计算。 为什么要使用…

上一篇说明从皮尔逊系数选择，这次使用卡方检验的方法来选择特征，使用假设检验的方式。 首先还是从卡方检验的原理，…

上一篇文章讲到使用方差选择特征，这篇文章主要是使用pearson系数进行特征选择 使用相关系数法，先要计算各个…

方差选择法当然是使用方差来衡量特征，处理的维度是特征维度，计算当前的特征的方差大小，根据设定的方差阈值选取出大…

特征选择在机器学习中占据了重要的地位，通常在构造完特征之后会发现很多特征，少则十几个多则几十个，其实这些特征并…