Spark创建DataFrame的三种方法

qingchuan 编程&语言 76 次浏览 , ,
跟关系数据库的表(Table)一样,DataFrame是Spark中对带模式(schema)行列数据的抽象。DateFrame广泛应用于使用SQL处理大数据的各种场景。创建DataFrame有很多种方法,比如从本地List创建、从RDD创建或者从源数据创...

Spark读取/保存本地文件

qingchuan 技术问答 111 次浏览 ,
本文介绍两点: 1. 如何用Spark读取本文文件内容。 2. 如何用Spark将数据写到本地,特别是将大文件写到本地。 Spark读取本地文件内容 通常情况下,如果用下面的代码读取本地文件: [crayon-58d990288fddd77539...

nginx网站快速从http转https步骤

qingchuan 系统&架构 479 次浏览 , , ,
Http的裸奔特质已经被越来越多的人所了解,当前从Http转向Https已经是大势所趋。google和百度相继宣布支持Https, 并且承诺在搜索结果中,Https网站会获得更好的排名。本文将以nginx服务器为例,介绍快速从http转h...

PHP安全发送邮件:PHPMailer

qingchuan 编程&语言 461 次浏览 , ,
要使用PHP安全地发送邮件可以使用PHPMailer,说明如下: PHP 本身提供了一个mail()函数,看起来简单易用。 不幸的是,与 PHP 中的很多东西一样,它的简单性只是个幻象,事实上使用不当它可能有严重的安全问题。 ...

Markdown语法教程

qingchuan 技术教程 620 次浏览 , ,
NOTE: This is Simplelified Chinese Edition Document of Markdown Syntax. If you are seeking for English Edition Document. Please refer to Markdown: Syntax. 声明: 这份文档派生(fork)于繁体中文版,...

Markdown快速入门教程

qingchuan 技术教程 496 次浏览 ,
声明: 这份文档派生(fork)于繁体中文版,在此基础上进行了繁体转简体工作,并进行了适当的润色。此文档用 Markdown 语法编写,你可以到这里查看它的源文件。「繁体中文版的原始文件可以查看这里」--By @riku Ma...

因子机深入解析[推荐]

tracholar 机器学习 1,112 次浏览 ,
本文由Tracholar授权发布,未经允许,请勿转载。 在组内做过一次因子机的技术分享,这里将内容以及自己的思考记录如下。 综述 什么是因子机 FM与矩阵分解 FM与决策树 FM与神经网络 综述 2010年,日本大阪大...
Go