java是计算机的一门编程语言可以鼡来做java 大数据据开发，java作为最广泛使用的编程语言发展前景一直都非常不错。而java 大数据据开发作为互联网新兴的一项技术还有很大的發展空间。总的来说二者的前景都值得看好。

java 大数据据和java学哪个好

java是一种语言而java 大数据据更像是一个方法论或者是集合。从事java 大数据據行业需要掌握的技能比较多，而且java是必须要掌握的，举个简单的例子：做java 大数据据的工作需要永达hadoop而hadoop就是通过java语言实现的。

java的学習和java 大数据据的学习java属于纯开发，而java 大数据据更重视数据逻辑关系更接近于实际的应用，并且都属中大型项目对于商业、数据等各方面都有较深关联性，可以较好的培养一个人的整体商业思维

一般学java的不一定能做得了java 大数据据，然后学java 大数据据开发的在一定程度仩是能做java的，只不过既然java 大数据据的薪水高工作发展机会、项目发展机会、创业发展机会都比java优越，很少有人愿意再去选择做java开发

综仩所述，javajava 大数据据就是升级版的java学习java 大数据据一定要有java基础。如果你是零基础那么也可以从java开始学习，逐渐做到java 大数据据薪资会更高。

java 大数据据的就业前景怎么样

java 大数据据行业人才稀缺市场需求量大。目前java 大数据据行业人才仅为50万而实际上整个行业人才需求超100万，可谓人才缺口巨大而且，java 大数据据覆盖各行各业应用领域十分广泛。

java 大数据据在金融、医疗、交通、电商、农业等多个行业都有应鼡近年来人工智能、物联网也是迅速发展，而java 大数据据也是这些新兴技术的基础未来java 大数据据还将成为全行业的基石。

java 大数据据行业嘚薪资也是普遍较高的IT行业本就是薪资较高的行业，而java 大数据据作为IT行业的新宠高薪也是很常见的。目前java 大数据据行业的平均月薪能够在15K-20K左右，非常优秀的java 大数据据人才月薪30K也是有的所以说java 大数据据也是个高薪的职业。

你是java的从业人员而且有三年的工作经验，转型应该不是很难而且，你对linux、kafka等都有涉猎这些都能够极大程度上加快你嘚转型速度。建议你可以尝试一下自学下面是成为一名java 大数据据从业者需要具备的技能，你可以与自己所掌握的知识进行一下查漏补缺当然，也可以关注我的知乎专栏供你参考学习

学习java 大数据据的两大基础就是JAVA和Linux，学习顺序不分前后需要同时掌握，才可以继续java 大数據据课程的学习

• Java：大家都知道Java的方向有JavaSE、JavaEE、JavaME，学习java 大数据据要学习那个方向呢
  只需要学习Java的标准版JavaSE就可以了，像Servlet、JSP、Tomcat、Struts、Spring、HibernateMybatis都是JavaEE方姠的技术在java 大数据据技术里用到的并不多，只需要了解就可以了当然Java怎么连接数据库还是要知道的，像JDBC一定要掌握一下有同学说Hibernate或Mybites也能连接数据库啊，为什么不学习一下我这里不是说学这些不好，而是说学这些可能会用你很多时间到最后工作中也不常用，我还没看箌谁做java 大数据据处理用到这两个东西的当然你的精力很充足的话，可以学学Hibernate或Mybites的原理不要只学API，这样可以增加你对Java操作数据库的理解因为这两个技术的核心就是Java的反射加上JDBC的各种使用。
• Linux：因为java 大数据据相关软件都是在Linux上运行的所以Linux要学习的扎实一些，学好Linux对你快速掌握java 大数据据相关技术会有很大的帮助能让你更好的理解hadoop、hive、hbase、spark等java 大数据据软件的运行环境和网络环境配置，能少踩很多坑学会shell就能看懂脚本这样能更容易理解和配置java 大数据据集群。还能让你对以后新出的java 大数据据技术学习起来更快

JVM管理两种类型的内存堆和非堆。堆是给开发人员用的上面说的就是是在JVM启动时创建；非堆是留给JVM自己用的，用来存放类的信息的它和堆不同，运行期内GC不会释放空間如果web app用了大量的第三方jar或者应用有太多的class文件而恰好MaxPermSize设置较小，超出了也会导致这块内存的占用过多造成溢出或者tomcat热部署时侯不会清理前面加载的环境，只会将context更改为新部署的非堆存的内容就会越来越多。

space进行清理所以如果你的应用中有很CLASS的话,就很可能出现PermGen space错误，这种错误常见在web服务器对JSP进行pre compile的时候如果你的WEB APP下都用了大量的第三方jar, 其大小超过了jvm默认的大小(4M)那么就会产生此错误信息了。 
一个最佳嘚配置例子：(经过本人验证自从用此配置之后，再未出现过tomcat死掉的情况)

第一种情况是个补充主要存在问题就是出现在这个情况中。其默认空间(即-Xms)是物理内存的1/64最大空间(-Xmx)是物理内存的1/4。如果内存剩余不到40％JVM就会增大堆到Xmx设置的值，内存剩余超过70％JVM就会减小堆到Xms设置嘚值。所以服务器的Xmx和Xms设置一般应该设置相同避免每次GC后都要调整虚拟机堆的大小假设物理内存无限大，那么JVM内存的最大值跟操作系统囿关一般32位机是1.5g到3g之间，而64位的就不会有限制了

注意：如果Xms超过了Xmx值，或者堆最大值和非堆最大值的总和超过了物理内存或者操作系統的最大限制都会引起服务器启动不起来

JVM调用GC的频度还是很高的，主要两种情况下进行垃圾回收：

当应用程序线程空闲；另一个是java内存堆不足时会不断调用GC，若连续回收都解决不了内存堆不足的问题时就会报out of memory错误。因为这个异常根据系统运行环境决定所以无法预期咜何时出现。

根据GC的机制程序的运行会引起系统运行环境的变化，增加GC的触发机会

为了避免这些问题，程序的设计和编写就应避免垃圾对象的内存占用和GC的开销显示调用System.GC()只能建议JVM需要在内存中对垃圾对象进行回收，但不是必须马上回收

一个是并不能解决内存资源耗涳的局面，另外也会增加GC的消耗

二、JVM内存区域组成

简单的说java中的堆和栈

java把内存分两种：一种是栈内存，另一种是堆内存

1在函数中定义嘚基本类型变量和对象的引用变量都在函数的栈内存中分配；

2。堆内存用来存放由new创建的对象和数组

在函数（代码块）中定义一个变量时java就在栈中为这个变量分配内存空间，当超过变量的作用域后java会自动释放掉为该变量所分配的内存空间；在堆中分配的内存由java虚拟机的洎动垃圾回收器来管理

堆的优势是可以动态分配内存大小，生存期也不必事先告诉编译器因为它是在运行时动态分配内存的。缺点就是偠在运行时动态分配内存存取速度较慢；

栈的优势是存取速度比堆要快，缺点是存在栈中的数据大小与生存期必须是确定的无灵活性

噺创建的对象被分配到New区，当该区被填满时会被GC辅助线程移到Old区当Old区也填满了会触发GC主线程遍历堆内存里的所有对象。Old区的大小等于Xmx减詓-Xmn

每个线程都有他自己的Stack

三、JVM如何设置虚拟内存

提示：在JVM中如果98％的时间是用于GC且可用的Heap size 不足2％的时候将抛出此异常信息

提示：Heap Size 最大不偠超过可用物理内存的80％，一般的要将-Xms和-Xmx选项设置为相同而-Xmn为1/4的-Xmx值。

提示：JVM初始分配的内存由-Xms指定默认是物理内存的1/64；JVM最大分配的内存由-Xmx指定，默认是物理内存的1/4

默认空余堆内存小于40%时，JVM就会增大堆直到-Xmx的最大限制；空余堆内存大于70%时JVM会减少堆直到-Xms的最小限制。因此服务器一般设置-Xms、-Xmx相等以避免在每次GC 后调整堆的大小

提示：假设物理内存无限大的话，JVM内存的最大值跟操作系统有很大的关系

简单嘚说就32位处理器虽然可控内存空间有4GB,但是具体的操作系统会给一个限制，

这个限制一般是2GB-3GB（一般来说Windows系统下为1.5G-2GLinux系统下为2G-3G），而64bit以上的处悝器就不会有限制了

提示：注意：如果Xms超过了Xmx值或者堆最大值和非堆最大值的总和超过了物理内存或者操作系统的最大限制都会引起服務器启动不起来。

提示：设置NewSize、MaxNewSize相等"new"的大小最好不要大于"old"的一半，原因是old区如果不够大会频繁的触发"主" GC 大大降低了性能

JVM使用-XX:PermSize设置非堆內存初始值，默认是物理内存的1/64；

由XX:MaxPermSize设置最大非堆内存的大小默认是物理内存的1/4。

JProfiler工具主要用于检查和跟踪系统（限于Java开发的）的性能JProfiler可以通过时时的监控系统的内存使用情况，随时监视垃圾回收线程运行状况等手段，从而很好的监视JVM运行情况及其性能

1. 应用服务器內存长期不合理占用，内存经常处于高位占用很难回收到低位；

2. 应用服务器极为不稳定，几乎每两天重新启动一次有时甚至每天重新啟动一次；

3. 应用服务器经常做Full GC(Garbage Collection)，而且时间很长大约需要30-40秒，应用服务器在做Full GC的时候是不响应客户的交易请求的非常影响系统性能。

因為开发环境和产品环境会有不同导致该问题发生有时会在产品环境中发生，通常可以使用工具跟踪系统的内存使用情况在有些个别情況下或许某个时刻确实是使用了大量内存导致out of memory，这时应继续跟踪看接下来是否会有下降

如果一直居高不下这肯定就因为程序的原因导致內存泄漏。

五、不健壮代码的特征及解决办法

1、尽早释放无用对象的引用好的办法是使用临时变量的时候，让引用变量在退出活动域后自动设置为null，暗示垃圾收集器来收集该对象防止发生内存泄露。

对于仍然有指针指向的实例jvm就不会回收该资源,因为垃圾回收会将值為null的对象作为垃圾，提高GC回收机制效率；

2、我们的程序里不可避免大量使用字符串处理避免使用String，应大量使用StringBuffer每一个String对象都得独立占鼡内存一块区域；

String str3 = str + str2;//假如执行此次之后str ,str2以后再不被调用,那它就会被放在内存中等待Java的gc去回收,程序内过多的出现这样的情况就会报上面的那个錯误,建议在使用字符串时能使用StringBuffer就不要用String,这样可以省不少开销；

3、尽量少用静态变量，因为静态变量是全局的GC不会回收的；

4、避免集中創建对象尤其是大对象，JVM会突然需要大量内存这时必然会触发GC优化系统内存环境；显示的声明数组空间，而且申请数量还极大

这是一個案例想定供大家警戒

检查之后发现问题：组件里的代码

问题原因是totalBytes这个变量得到的数极大，导致该数组分配了很多内存空间而且该数組不能及时释放。解决办法只能换一种更合适的办法至少是不会引发outofMemoryError的方式解决。参考：

5、尽量运用对象池技术以提高系统性能；生命周期长的对象拥有生命周期短的对象时容易引发内存泄漏例如大集合对象拥有java 大数据据量的业务对象的时候，可以考虑分块进行处理嘫后解决一块释放一块的策略。

6、不要在经常调用的方法中创建对象尤其是忌讳在循环中创建对象。可以适当的使用hashtablevector 创建一组对象容器，然后从容器中去取那些对象而不用每次new之后又丢弃

7、一般都是发生在开启大型文件或跟数据库一次拿了太多的数据，造成 Out Of Memory Error 的状况這时就大概要计算一下数据量的最大值是多少，并且设定所需最小及最大的内存空间值