各位写scala 写入hdfs文件中么

大家都用什么IDE写scala代码 - 随笔 - Scala圈子 - ITeye群组
& 上一页 1
刚接触scala,有兴趣学习下。可是没找到好用的IDE,装了个eclipse插件,感觉很不好用,特别是想把scala用在web项目的时候很不方便。兄弟们有好用的scala IDE的话共享一下,谢谢。
我把每个都试了一遍,最后还是用 Vim ……
原来用Utraedit+NetBeans,现在在用Eclipse插件最新版的2.7.7.final。 Eclipse的最新版插件感觉bug少了不少,基本可以凑活着用了,就是编辑大文件的时候速度满了一点有点卡,还有就是极其吃内存,用着用着就到400M了。
有个好的IDE真的重要,看看java对应的ide。
看来scala要多被几个大公司使用就好了,估计那里才会有真的好的IDE了。
fineqtbull 写道原来用Utraedit+NetBeans,现在在用Eclipse插件最新版的2.7.7.final。 Eclipse的最新版插件感觉bug少了不少,基本可以凑活着用了,就是编辑大文件的时候速度满了一点有点卡,还有就是极其吃内存,用着用着就到400M了。
对啊,本来开发机器的配置就吃紧,速度一慢那真叫急人。
Scala中文社区的版主fineqtbull也是阁下吧,以后多赐教哦,呵呵
yangzhan 写道有个好的IDE真的重要,看看java对应的ide。
看来scala要多被几个大公司使用就好了,估计那里才会有真的好的IDE了。
共同期待。。。我也把Intellij IDEA装起来了,准备有时间试试
hbnu0502 写道Scala中文社区的版主fineqtbull也是阁下吧,以后多赐教哦,呵呵
恩,不过现在去得少了。赐教不敢,一起学习进步吧。
对于复杂ide就大脑当机的我来说使用vim和emac这种东西就是个悲剧。。。宁愿用emedit或者notepad++
iaimstar 写道对于复杂ide就大脑当机的我来说
使用vim和emac这种东西就是个悲剧。。。
宁愿用emedit或者notepad++
emedit(or?)好久没听过了。十年前好像编辑(就是编辑这种行当)也有用那个来着的好像。还有曾经的editplus....ultraedit....这两个都无爱。
怎么没人提e?怎么也得给他个面子嘛。。。我刚下载了一下。连cygwin都没装。纯粹装着玩。30day后就到期了。那时我的这台电脑到也期了,无所谓..
大家可以试试IDEA
& 上一页 1温馨提示!由于新浪微博认证机制调整,您的新浪微博帐号绑定已过期,请重新绑定!&&|&&
一直从事气象预报、服务建模实践应用。
注重气象物理场、实况场、地理信息、本体知识库、分布式气象内容管理系统建立。
对Barnes客观分析, 小波,计算神经网络、信任传播、贝叶斯推理、专家系统、网络本体语言有一定体会。
一直使用Java、Delphi、Prolog、SQL编程。
LOFTER精选
网易考拉推荐
用微信&&“扫一扫”
将文章分享到朋友圈。
用易信&&“扫一扫”
将文章分享到朋友圈。
阅读(9246)|
用微信&&“扫一扫”
将文章分享到朋友圈。
用易信&&“扫一扫”
将文章分享到朋友圈。
历史上的今天
在LOFTER的更多文章
loftPermalink:'',
id:'fks_',
blogTitle:'scala 文本文件读/写',
blogAbstract:'object Test {& import reflect.io.Path& import scala.collection.immutable.SortedMap& val fnm = \"d:/test.txt\"& def wrt(p :& Iterator[Path]) {&&& import java.io._&&& val writer = new PrintWriter(new File(fnm),\"UTF-8\")&&& var i = 0&&& p.foreach{& f =& &&&&&&& i += 1',
blogTag:'',
blogUrl:'blog/static/',
isPublished:1,
istop:false,
modifyTime:2,
publishTime:9,
permalink:'blog/static/',
commentCount:0,
mainCommentCount:0,
recommendCount:0,
bsrk:-100,
publisherId:0,
recomBlogHome:false,
currentRecomBlog:false,
attachmentsFileIds:[],
groupInfo:{},
friendstatus:'none',
followstatus:'unFollow',
pubSucc:'',
visitorProvince:'',
visitorCity:'',
visitorNewUser:false,
postAddInfo:{},
mset:'000',
remindgoodnightblog:false,
isBlackVisitor:false,
isShowYodaoAd:false,
hostIntro:'一直从事气象预报、服务建模实践应用。\n注重气象物理场、实况场、地理信息、本体知识库、分布式气象内容管理系统建立。\n对Barnes客观分析, 小波,计算神经网络、信任传播、贝叶斯推理、专家系统、网络本体语言有一定体会。\n一直使用Java、Delphi、Prolog、SQL编程。',
hmcon:'1',
selfRecomBlogCount:'0',
lofter_single:''
{list a as x}
{if x.moveFrom=='wap'}
{elseif x.moveFrom=='iphone'}
{elseif x.moveFrom=='android'}
{elseif x.moveFrom=='mobile'}
${a.selfIntro|escape}{if great260}${suplement}{/if}
{list a as x}
推荐过这篇日志的人:
{list a as x}
{if !!b&&b.length>0}
他们还推荐了:
{list b as y}
转载记录:
{list d as x}
{list a as x}
{list a as x}
{list a as x}
{list a as x}
{if x_index>4}{break}{/if}
${fn2(x.publishTime,'yyyy-MM-dd HH:mm:ss')}
{list a as x}
{if !!(blogDetail.preBlogPermalink)}
{if !!(blogDetail.nextBlogPermalink)}
{list a as x}
{if defined('newslist')&&newslist.length>0}
{list newslist as x}
{if x_index>7}{break}{/if}
{list a as x}
{var first_option =}
{list x.voteDetailList as voteToOption}
{if voteToOption==1}
{if first_option==false},{/if}&&“${b[voteToOption_index]}”&&
{if (x.role!="-1") },“我是${c[x.role]}”&&{/if}
&&&&&&&&${fn1(x.voteTime)}
{if x.userName==''}{/if}
网易公司版权所有&&
{list x.l as y}
{if defined('wl')}
{list wl as x}{/list}我为什么想并且要学习 Scala
我的图书馆
我为什么想并且要学习 Scala
【数盟致力于成为最卓越的数据科学社区,聚焦于大数据、分析挖掘、数据可视化领域,业务范围:线下活动、在线课程、猎头服务、项目对接】作者:abbey&为什么学习函数式编程&在阅读DDD巨著《Patterns, Principles, and Practices of Domain-Driven Design》的过程中,Scott在第5章提到了使用函数式编程语言配合贫血模型去实践DDD的一种思路,这激发了我的无限遐想。在软件开发领域,我们已经拥有了许多的抽象方法论和大量的实现技术。但我个人认为,这一切归根结底,都是人类思维在软件开发领域的具体表达方式。而人类在认识和分析软件所要解决的业务领域问题时,思考的内容不外乎由两个部分组成:『业务流程』与『业务规则』。前者,回答了业务活动中先做什么后做什么的问题;后者,则回答了遇到什么情况时应该怎么做的问题。两者结合后,得到我们需要的业务结果,或者叫作“实现业务目标”。&再想想目前学习和掌握的面向对象的一系列方法,又是如何将上述思维结果映射到软件中去的呢?我认为是这样的:&对于业务流程,我们将其表达为若干对象之间的合作,比如UML里序列图的对象与消息,进而具化为具体的类及其职责,比如类及其若干业务方法。对于业务规则,我们将其表达为若干的判断逻辑,比如UML流程图里的判断分支,进而具化为业务方法里的if-else语句,或者再复杂一点,表达为工厂、策略等设计模式的实际运用。&然后,我认为,对于复杂业务规则的梳理,可以象数学归纳法一样进行演绎:假设一个函数y=f(x),给定x的定义域,确定y的值域。特别是在排列组合等方面的一些问题,也经常采用递归的方式来解决。所以,从这个角度讲,函数式编程更贴近人类思维习惯,所以让我自然而然地把目光转向了它。&为什么选择Scala&在选择具体的函数式编程语言时,我首先想到的是它最好是同时能支持面向对象编程的。因为即便LISP作为函数式编程语言的先祖,诞生已长达半个世纪,但单纯的函数式编程语言与面向对象编程语言相比,在抽象领域概念、组合系统模块、实现信息隐蔽等方面存在一定的差距,所以一直没有成为软件开发的主流。&信息隐蔽原理:在西安电子科大蔡希尧与陈平老师于1993年合作出版的《面向对象技术》一书中是这样描述的:把需求和求解的方法分离;把相关信息——数据结构和算法,集中在一个模块之中,和其他模块隔离,它们不能随便访问这个模块内部的信息。&其次,由于我的语言路线是从Pascal → C → C
→ C#,所以我希望能选择一种风格近似于C、强类型的函数式编程语言。在比较了F#、R、ErLang等几种常见的函数式编程语言之后,我最终选择了Scala。&Scala有何优势&注:以下内容,节选翻译或参考自《Programming in Scala》第1章、第3章,《Programming Scala》第6章,不算完整意义上的个人心得。&函数式编程的优势&纯的函数是没有副作用的。无论何时何地,对于一个函数y=f(x),给定x必定得到y,不会因此产生二义结果。因此无论对于代码测试还是并发,由于给定输入必定得到预期输出,而不受其他因素干扰,所以能有效减少Bug产生。在函数式编程里,大量使用immutable的值。这意味着函数运算的结果总会创建一个新的实例,避免了通常并发环境下为防止数据共享冲突而采取的保护机制。尽管这需要额外的Copy操作,但Scala针对性地提供了高效的Copy实现,以及延迟计算等弥补机制。函数是一等公民。函数作为表达式的一部分,可以借由函数之间的嵌套、组合,实现复杂的判断逻辑。&Scala语言本身的优势&Scala是面向对象与函数式编程的混合语言,所以能有效结合二者的优点。Scala属于Java生态圈,可以在JVM平台上与Java一起编译运行,所以许多Java的框架、工具都可以直接应用于Scala语言编写的项目。Scala视一切数据类型皆为对象,且支持闭包、lambda、by-name参数等特性,语法简洁明快。Scala使用Actor作为并发模型,与Akka框架自然契合。这是一种区别于传统的、基于数据共享、以锁为主要机制的并发模型,其特点在于以Actor为基本单位、没有数据共享、基于消息传递实现Actor之间的协作,因此可以有效避免死锁、减少竞争。最后,如果有朝一日要转向大数据领域,有Spark这样的大型框架作为支撑。知乎:与 Hadoop 对比,如何看待 Spark 技术?&Scala对实践DDD有何意义&说了那么多,我的根本目的还是要将Scala作为实现DDD的主要武器。那么试想一下,Scala在我们实现DDD的过程中能有哪些帮助呢?我暂且胡侃乱诌如下:表示值对象、领域事件等元素更直观。值对象、领域事件在DDD里都应该是immutable的,以往多采取POCO形式表示,现在改用Scala里的val以及case class表示,在语法层面就直观地表明是不可修改的。在类的方法层面实现CQRS时有语法支持。用Scala里的Function(返回类型为非Unit)对应CQRS里的Query,保证类的方法没有副作用;用Procedure(返回类型为Unit)对应CQRS里的Command,明确表明这一类方法会产生修改状态等副作用。这同样从语法层面就能对二者进行明确区分。模式匹配丰富了函数操作。除了正则表达式,Scala形式多样的模式匹配语法,为提取数据、完成数据分组聚合等运算、实现逻辑判断提供了强大支持。比如定义def sum_count(ints:Seq[Int) = (ints.sum, ints.size)这样一个函数后,我们可以这样调用,以得到一个1至6的整数序列的整数值合计,及该序列的尺寸: val(sum, count) = sum_count(List(1, 2, 3, 4, 5, 6))。为实现DSL提供有力支持。Scala自带有解析框架,加上灵活的函数语法支持,要自己实现一套DSL及其相应的语法解析器将不再困难。比如在配置文件里这样的一条配置语句,表示退休条件为年龄达到60周岁或者工龄届满30年:retire = (Age &= 60) || (ServiceLength &= 30)。以往的方式是自己写一个语法解析器,把这条文本转换成相应的Specification对象,然后扔给聚合去使用。现在有了Scala的帮助,就使编写语法解析器这一环节的工作量大大减少。合理的高阶函数设计,使规则编写得到简化。比如打折规则、费用报销规则,以往可能需要若干层的if-else嵌套,现在则将通过高阶函数得到大幅简化。对此,我强烈推荐刘光聪先生的视频Refactoring to Functions,你会在刘先生的重构过程中发现高阶函数的强大。Actor为高效并发打下基础。Actor内部完全自治,自带用于存储消息的mailbox,与其他Actor只能通过消息进行交互,每个Actor都是并发的一个基本单位。这些特点,非常适合于采取Event Sourcing方式实现的DDD。每个聚合都好比一个Actor,在聚合内部始终保持数据的强一致性,而在聚合之间交互的领域事件则好比Actor之间的消息,聚合之间借由领域事件和Saga保证数据的最终一致性。Trait成为AOP利器。Trait是Scala的另一大特色,它就象AOP织入一样,能动态地给某个类型注入方法或者结构。比如配合类Circuit和with后面那4个Trait的定义,val circuit = new Circuit with Adders with Multiplexers with Flipflops with MultiCoreProcessors这样就创建了一个带有加法器、乘法器、触发器和多核处理器的元件。隐式实现为类型扩展提供支持。对应C#里的静态扩展方法,Scala通过implicit为实现数据类型的方法扩展提供了便捷,成为Trait之外的另一个功能扩展手段。能降低常见BDD框架的学习成本。尽管这一点可能比较牵强,但我正在努力摸索如何将BDD与DDD结合,而常见的Cucumber、Spock等一些BDD框架,其语法与Scala比较相近,所以我才有如此一说。&有哪些Scala学习资料&以下是我目前主要的学习资料,并衷心欢迎各位留言补充。&书籍Programming in Scala:由Scala语言的设计师Martin Odersky编写,循序渐进,配合了大量实例,入门必读吧。Programming Scala:视角与上面那本有点不一样,没有Scala语言基础会感觉很困难,适合掌握了基本语法后温故而知新。&在线文档与视频Scala 官方文档:Scala的官网,作为寻找资料的出发点是不错的。Scala 课堂:中文版的Scala基本语法在线课堂。Scala Synatax Primer:由Jim McBeath整理的Scala语法概要,可以当字典用。The Neophyte’s Guide to Scala:很出名的一个Scala入门指南,以Scala中的提取器Extractor作为实例开始。Scala 初学指南:这是上面那本指南的中译本。Effective Scala:中文版的Scala高效编程SBT中文入门指南:Scala Build Tool&社区Scala 中文社区:不算活跃,原因你懂的。Scala User:Scala入门者聚集地,没有Stack Overflow那么严格,但也需要点爬墙的身手。&SDK及IDEJava SE:先装这个Scala SDK:再装这个SBT:然后装这个IntelliJ IDEA:最后装这个,就能比较方便地开始Scala编程了&写在最后&最近读的书很多也很杂,DDD、BDD、Scala、Cucumber以及Java基础等等都有涉及,真恨不得一口吃成个大胖子。由于时间和精力有限,所以现在知识消化很成问题,迟迟没有进入学以致用的环节,只能先这样纸上谈兵了,好歹先把自己在学习过程中的一些思考、看到的好东西先记载下来,以备将来之需。原文链接:/topics/134?hmsr=toutiao.io&utm_medium=toutiao.io&utm_source=toutiao.io&
发表评论:
TA的最新馆藏[转]&[转]&

我要回帖

更多关于 scala读写properties 的文章

 

随机推荐