程序员转行大数据应该学习哪些编程语言

  • A+
所属分类:编程语言

程序员转行大数据应该学习哪些编程语言

原始的数据科学是劳动密集型活动,但当你会用适合的语言进行工作时,数据科学应该是非常智能有趣的工作,会让你得到一些不容易看到的结论。

一般来说,数据科学中常常会涉及大量数据的处理,此时优化代码的性能非常重要。考虑到这些基本原则,来看看哪些语言是数据科学中应该掌握的:

R

程序员转行大数据应该学习哪些编程语言

R 发布于 1995 年,是 S 语言的一个分支,开源。目前由 R Foundation for Statistical Computing 提供技术支持。

优点:

  • 免费、开源,各种功能和函数琳琅满目

  • 专门为统计和数据分析开发的语言,即使基础安装也包含全面的统计功能和方法

  • 数据可视化

缺点:

  • 性能,R 作为解释型语言,运行效率并不高

  • R 在统计学的表现很出色,但并不适用于通用编程

  • Package 的可靠性问题

小结:R 语言在统计和数据可视化方面非常强大,并且开源让它聚集了一帮活跃的贡献者,不过由于开发者良莠不齐,导致 Package 的可靠性方面会有点问题

Python

程序员转行大数据应该学习哪些编程语言

Guido van Rossum 在 1991 年推出 Python,开源。Python 广泛用于数据科学领域,目前主要的版本是 3.6 和 2.7。

优点:

  • Python 是一门主流编程语言,有着广泛的在线支持

  • 入门友好,易于学习

  • 有诸如 pandas,scikit-learn 和 Tensorflow 这样优秀的 package

缺点:

  • Python 作为动态语言,比 Java 还慢,而且容易出现类型错误

  • 对于特定的统计或数据分析,R 的封装会比 Python 更轻松;而在通用性方面,也有比 Python 更好的替代方案

小结:Python 是数据科学中很好的选择,而且,Google 的 TensorFlow 使得机器学习框架都偏向于Python

SQL

程序员转行大数据应该学习哪些编程语言

SQL 是结构化查询语言,用于存取数据以及查询、更新和管理关系数据库系统

优点:

  • 在查询、更新和管理关系数据库方面非常有效

  • 易读。类似这样的语句基本不会有歧义:SELECT name FROM users WHERE age > 18

  • SQLAlchemy 等模块使 SQL 与其他语言的集成变得简单明了

缺点:

  • 分析功能相当有限

  • SQL有很多不同的实现,如 PostgreSQL,SQLite,MariaDB。他们都是不同的,操作起来有点麻烦。

小结:SQL 作为数据处理语言比作为高级分析工具更有用

Java

程序员转行大数据应该学习哪些编程语言

Java 具有简单性、面向对象、分布式、健壮性、安全性、平台独立与可移植性、多线程、动态性等特点,目前由 OSracle Corporation 支持。

优点:

  • 应用广泛,许多系统和应用都用 Java 写后端,能够将数据科学方法直接继承到现有的代码库

  • 健壮。对于重要任务的大数据应用,这点很宝贵

  • 适合编写高效的 ETL 生产代码和计算密集型机器学习算法

缺点:

  • 对于专用的统计分析,Java 的冗长度不适合作为首选。不过动态类型的脚本语言(如 R 和 Python)可以提高生产率

  • 与 R 这样特定领域的语言相比,Java 中没有大量可用于高级统计方法的库

小结:Java 其实不推荐作为数据科学语言的首选,尽管它能将数据科学代码无缝接入现有代码库,而且性能和安全性也是它的优势。但是作为开发者,使用 Java 就意味着没有其他语言特定的包可用。

Scala

程序员转行大数据应该学习哪些编程语言

Scala 是一门多范式的编程语言,类似 Java,由 Martin Odersky 开发并于 2004 年发布。

优点:

  • Scala + Spark = 高性能集群计算。它是大数据领域的杀手级应用框架

  • 多范式

  • Scala 被编译为 Java 字节码并在 JVM 上运行,这使 Scala 成为非常强大的通用语言,同时也非常适合数据科学

缺点:

  • Scala 并不太适合初学者

  • 语法和类型都比较复杂,这对于 Python 开发者其实是个比较陡峭的学习曲线

小结:对于集群处理大数据的环境,Scala + Spark 是一个很棒的解决方案。但对于少量数据而言,其他语言或许效率更高

Julia

程序员转行大数据应该学习哪些编程语言

Julia 是一款刚出现没几年的 JIT 科学计算语言, 为高性能科学计算而生。

优点:

  • JIT(just-in-time)语言,性能良好,还提供像 Python 等解释语言的脚本功能和动态类型

  • 为数值分析而生,但也同样能进行通用编程

  • 可读性好,而且 Julia 文档的中文翻译优秀(因为核心组有个中国人哈哈哈)

缺点:

  • 作为一种新语言,很难说已经可以成熟到大规模使用

  • 有限的包

小结:潜力无限,但就目前而言,还不如 R 和 Python 一样成熟稳定

MATLAB

程序员转行大数据应该学习哪些编程语言

MATLAB 是 MathWorks 公司出品的商业数学软件,用于算法开发、数据可视化、数据分析以及数值计算的高级技术计算语言和交互式环境,在数学类科技应用软件中在数值计算方面首屈一指。

优点:

  • 专为数值计算而设计,非常适合具有复杂数学计算的定量应用,如信号处理、傅里叶变换、图像处理等

  • 数据可视化,MATLAB 内置了绘图功能

  • 作为数学本科课程的一部分,它在物理、工程、应用数学等领域有着广泛应用

缺点:

  • 还挺贵的(获取 MATLAB 及工具箱报价)

  • 不适用于通用编程

小结:MATLAB 最适合数据密集型应用,毕竟它就是为此而生的。

总结

本文只是个快速指南,来帮助选择哪种语言适合做数据科学。当然,除了上述介绍的语言外,C++、JavaScript、Perl 还有 Ruby 也可以解决一些数据问题,其中的关键在于你的使用需求,以及个人的喜欢等。

写在最后

前几天有私信小编要Python的学习资料,小编整理了一些有深度的Python教程和参考资料,从入门到高级的都有,文件已经打包好了,正在学习Python的同学可以下载学习学习。文件下载方式:点击小编头像,关注后私信回复“资料”即可下载。首先把代码撸起来!首先把代码撸起来!首先把代码撸起来!重要的事说三遍,哈哈。“编程是门手艺活”。什么意思?得练啊。

程序员转行大数据应该学习哪些编程语言

weinxin
我的微信公众号
爱真理,得永生!          爱在灵灵久博客,网罗天下,福利大家!

发表评论

:?: :razz: :sad: :evil: :!: :smile: :oops: :grin: :eek: :shock: :???: :cool: :lol: :mad: :twisted: :roll: :wink: :idea: :arrow: :neutral: :cry: :mrgreen: