分类：scala

2021
08-25

解决scala.collection.mutable.Map写入的问题

在scala中可变Map写入使用valno2ID=scala.collection.mutable.Map[Int,String]()no2ID+=(1->"something")而在以下代码中，Map不能添加元素valno2ID=scala.collection.mutable.Map[Int,String]()sc.textFile(conf).foreach(line=>{valsplits=line.split(“,”)valno=splits(0).trim.toIntvalID=splits(1)no2ID+=(no->ID)})其中conf文件为数字和对应的人名把RDD使用collect转化成Array后，可以向Map添加元素v... 继续阅读 >

2020
10-10

Java 和 Scala 如何调用变参

Java和Scala都支持变参方法,写在最后的位置上，最基本的调用方式也都是一样的，一个个罗列过去。也可以传入数组参数，因为变参本质上就是一个数组，就是把...开始位置到最后一个参数都收纳到数组中去，所以变参之所以要放在最后的位置上，且一个方法中最多只能有一个变参类型。这里主要是对比Scala对变参方法的调用，基本调用法当然是没问题的，但是在传入数组作为变参的参数列表与Java相对时就稍有变化了。另外提一下，... 继续阅读 >

2020
10-08

浅谈Scala模式匹配

一.scala模式匹配（patternmatching）patternmatching可以说是scala中十分强大的一个语言特性，当然这不是scala独有的，但这不妨碍它成为scala的语言的一大利器。scala的patternmatching是类似这样的，ematch{casePattern1=>doSomethingcasePattern2if-clause=>doothers...}其中，变量e后面接一个match以及一个代码块，其中每个case对应一种可能回匹配的类型，如果匹配成功则执行=>后面的代码。我们可以用一个具... 继续阅读 >

2020
10-08

Scala函数式编程专题--scala集合和函数

前情提要：Scala函数式编程专题——函数式思想介绍scala函数式编程专题——scala基础语法介绍前面已经稍微介绍了scala的常用语法以及面向对象的一些简要知识，这次是补充上一章的，主要会介绍集合和函数。注意噢，函数和方法是不一样的，方法是在类里面定义的，函数是可以单独存在的（严格来说，在scala内部，每个函数都是一个类）一.scala集合介绍还记得上一章介绍的object的apply方法吗，很多数据结构其实都用到了它，从而让我... 继续阅读 >

2020
10-08

Scala函数式编程专题--scala基础语法介绍

上次我们介绍了函数式编程的好处，并使用scala写了一个小小的例子帮助大家理解，从这里开始我将真正开始介绍scala编程的一些内容。这里会先重点介绍scala的一些语法。当然，这里是假设你有一些java或者python的基础，毕竟大部分人不会将scala当作第一门学习编程的语言。不过这些语法知识记不住也没关系，本身语法这种东西就应该在使用中被记住。这里写这篇的目的也只是梳理一遍，方便大家对语法有个初步的印象，后面可以随时查询。... 继续阅读 >

2020
10-08

Scala函数式编程专题--函数思想介绍

为什么我们需要学习函数式编程？或者说函数式编程有什么优势？这个系列中我会用scala给你讲述函数式编程中的优势，以及一些函数式的哲学。不懂scala也没关系，scala和java是类似的，在每篇的开头我也会先说明这节中用到的scala语法。为什么函数式编程这几年火起来如Python一样，函数式编程（FP，即FunctionalProgramming）也是近几年才逐渐为人们所知，但它并不是一个多么新的概念。它拥有和面向对象编程（OOP）几乎等... 继续阅读 >

2020
10-08

Scala函数式编程专题--函数思想介绍

为什么我们需要学习函数式编程？或者说函数式编程有什么优势？这个系列中我会用scala给你讲述函数式编程中的优势，以及一些函数式的哲学。不懂scala也没关系，scala和java是类似的，在每篇的开头我也会先说明这节中用到的scala语法。为什么函数式编程这几年火起来如Python一样，函数式编程（FP，即FunctionalProgramming）也是近几年才逐渐为人们所知，但它并不是一个多么新的概念。它拥有和面向对象编程（OOP）几乎等... 继续阅读 >

2020
09-28

在IntelliJ IDEA中创建和运行java/scala/spark程序的方法

本文将分两部分来介绍如何在IntelliJIDEA中运行Java/Scala/Spark程序：基本概念介绍在IntelliJIDEA中创建和运行java/scala/spark程序基本概念介绍IntelliJIDEA本文使用版本为：ideaIC-2020.1IDEA全称IntelliJIDEA，是java编程语言开发的集成环境。IntelliJ在业界被公认为最好的java开发工具，它的旗舰版本还支持HTML，CSS，PHP，MySQL，Python等，免费版只支持Java，Scala等少数语言。如果只开发Java和Scala，去官网下载社... 继续阅读 >

2020
09-27

Jupyter notebook运行Spark+Scala教程

今天在intellij调试spark的时候感觉每次有新的一段代码，都要重新跑一遍，如果用spark-shell，感觉也不是特别方便，如果能像python那样，使用jupyternotebook进行编程就很方便了，同时也适合代码展示，网上查了一下，试了一下，碰到了很多坑，有些是旧的版本，还有些是版本不同导致错误，这里就记录下来安装的过程。1.运行环境硬件：Mac事先装好：Jupyternotebook，spark2.1.0，scala2.11.8(这个版本很重要，关系到后面的安装... 继续阅读 >

2016
04-06

Scala学习资源整理

最近正在接触Scala，所以就顺手整理了一份我看到的关于Scala的教程、文章等相关内容，不为别的，只为自己方便查找，当然如果能给正在学习Scala的小伙伴一些参考倒也是非常开心的。1、Scala入门开发教程该课程主要是带我们入门学习Scala，比较详细，适合初学者。其中最爽的地方就在于拥有在线的开发环境，不必本地搭建环境。2、Scala教程这个教程呢，也是入门学习，比较系统，适合初学者。... 继续阅读 >

2014
12-02

大神说Scala是个有趣的语言 你值得拥有

经常读我的博客的人应该知道，我最喜欢的编程语言是Haskell。我喜欢函数式编程，Haskell是一个能把函数式编程推向极致的语言。虽然如此，我仍然时刻关注着其它新兴的和即将产生的编程语言，特别是函数式的编程语言，所以，当Scala诞生之初我就知道了这种语言。当时，我粗略的对它了解了一下，并不是很喜欢；我感觉它的那些语法对于我的口味来说过于甜腻，而且这种语言看起来异常的复杂。然而，一些我很尊敬的人都喜欢这种语言... 继续阅读 >