昨天修改任务的代码时遇到的yaml文件一个配置项处理问题，逻辑代码里做了None的判断，我直接在yaml文件里 […]

case when 这种用法基本上每一类编程语言里都会有，scala 里面常见的就是 case 语法，也就是条 […]

这个系列好久没更新了，一个字懒，两个字很懒。这篇比较简单，主要的 API 就是 drop 函数。 val st […]

如题看到 MD 编辑器，这个插件就是一个MD编辑器插件，功能还是比较强大的。 安装 在 wordpress 后 […]

一次爬虫 302 跳转问题 原始的代码是使用java原生的库java.net 来开发的，但是请求对应的URL […]

随意点了下主题 update check 发现主题更新了，看看更新不少了新功能着手安排更新下。 更新方式比较是 […]

昨晚一直在运行的spark任务出现了异常，运行了这么久恰恰这个时候出现了异常。 最直观的现象就是任务出现延迟， […]

下午的会议整的我得好好想一想。 做算法其实最头疼的一件事应该就是想特征，一版接着一版，无穷无尽的迭代下去。相比 […]

写这篇博文记录这个问题应该过去几天了，由于xx原因没办法完全导出详细错误日志信息贴出来，下面列出的是简要的报错 […]

在SparkwithColumnRenamed()中用于重命名一列或多个DataFrame列名。取决于Data […]

Spark withColumn()是一个DataFrame函数，用于向DataFrame中添加新列，更改现有 […]

博主日常在工作中使用spark sql进行数据分析比较多，常见的还会借助hive。从Tfrecord里面读数据 […]

原因：通过其它地方复制粘贴过来的日期或数字，在excel内默认dao为文本格式或特殊所导致的，解决方如下： 一 […]

vlookup可谓是Excel查询命令中最为常用的一个，它可以根据某一条件查找到另一个数据区域中含有这个条件的 […]

介绍 code prettify 解释为 “代码修饰”。 他由JS代码和CSS代码构成，用来高亮显示HTML页 […]

本文介绍常见的几种对spark dataframe 进行列名的修改方法 生成测试数据 val data = S […]

## **上下文管理器（Context Manager）** 上下文管理器是指在一段代码执行之前执行一段代码， […]

冻结网络是希望在训练的过程中该部分网络的参数不参与模型的训练，也就是在BP反向传播的时候参数不参与更新。 简单 […]