面试公司：新致软件面试岗位：大数据开发 面试难度：难 面试结果：凉了 面经内容 1.自我介绍 2.看了工作年限，问我这几年一共做过多少个项目，每个项目都负责哪一块 3.按照我的简历项目一个一个的看，一个一个的问。先让介绍，然后问其中负责的部分，然后问用什么框架，问工具的使用和自己他们之间的区别kettle,smartbi,informatic(我不会),flume都问了。然后我说有的我自学的，还会问用了多久学会的 5.数据库的调优，oracle调优，hive调优 6.数据量过大怎么办 7.问了java会不会 8.工作中遇到的最难的问题以及解决办法 面经总结 差不多就这样。。感觉他们很注重语句调优和遇到问题是否有快速的解决办法还有对业务的梳理能力。

面试公司：度小满科技（北京）有限公司基本信息 度小满，在北京市海淀区西北旺东路，社招岗位，一轮线下面试，一共有三位面试官，有一份笔试题，还聊了一些基础的java多线程问题。 面试岗位：大数据开发 面试问题： 1.简单说一下wordcout的实现过程是什么 2.了解mr吗?他和spark具体有什么区别 3.有没有写过自定义UDF函数，简单说一下写的流程 4.多线程用过吗?说一下你对多线程的了解 5.数据仓库的设计模型有哪些?在你项目中涉及到哪些? 6.数据仓库如何对数据进行清洗的 7.当时你的数据仓库是如何设计的 8.简单说一下拉链表的原理 面试总结： 因为简历上写的数据仓库的内容多一些，所以几个面试管对这块问题，问的比较详细，大概面了3个多小时。感觉准备的不太好，还有一份笔试题，他们比较重视sql。

面试岗位：大数据开发面试公司：中科软科技股份有限公司 基本信息： 坐标西安，没有在北京找工作，面试公司是一个中科软提供的大数据岗位，电话面试简单询问了一些情况和聊了一下基础的问题，然后线下去甲方面的。 面试问题： 1.离线数仓项目你主要负责那部分？ 2.你们当时服务器的规模有多大 3.了解hive吗？简单说一下实现原理 4.项目涉及了多少张表？具体能介绍几张吗？ 5.hbase用过吗？与hive的区别可以简答说一下吗？ 6.spark内存管理简单介绍一下 7.hive分区表当时具体怎么分区的？ 8.flink有用过吗？简单介绍一下 9.你们在项目中具体遇到过哪些问题？你是怎么解决的？ 面试总结： 因为简历上写的数据仓库的内容多一些，所以几个面试管对这块问题，问的比较详细，大概面了3个多小时。感觉准备的不太好，还有一份笔试题，他们比较重视sql。

面试公司：文思海辉技术有限公司面试岗位：大数据开发 面试难度：简单 面试问题： 1.偏向etl和报表两个都做，大数据也涉及些。 2.差不多4个sql的题，就是他说然后说语句给他 3.问数据库分层，表结构，维度表，粒度 4.公司人员分配，项目架构，数据库分层，公司项目分配，写的项目介绍及负责部分 5.smartbi的使用流程 面试总结： 也没啥，只要sql笔试过了，基本上没啥问题，面试的时候问的多的也就是一些无关紧要的，比如说人员配比啊，还有就是一些报表工具，比如说smartbi，这个我不会，咱们这边主要是帆软的和superset为主，所以我就按照比较熟的一个去跟面试官说的。

面试公司：广州汇智通信技术有限公司面试岗位：大数据开发 面试难度：难 面试结果：未通过 面试问题： 1.你们hbase是怎么插入数据的?(逐条?分批?具体操作?) 2.假设region的磁盘坏了，如何做数据恢复，具体的修复之灵是?除了普通的磁盘数据恢复。 3.说一下你们zk的具体的应用场景，是用原生api还是结合其他框架使用，比如spark? 4.你们spark任务是怎么进行资源分配的? 5.你们一天的数据量有多大?平常出过什么故障?是如何解决的? 6.说一下你最熟悉的一个项目。 面经总结 一上来就是实战的东西，弄的有点懵，直接乱了，后边的有的会的都有点答的乱七八糟的，还是要好好看看简历上的内容，然后再总结总结

面试公司：北京酷数智能科技有限公司面试岗位：大数据开发 公司信息 公司在房山区，去面试做了好久，到了在会议室里面和他们领导谈的。刚开始介绍项目，后面针对项目问了一些框架问题和原理。自己准备的不太充分。 面试问题 1.Flume从哪采集的数据？（沪深）Flume中存放的数据是什么？（不会😂，不是格式）（我说的是股票。）都存放了哪些数据？你负责这个了吗？ 2.Flume的数据导入到了哪里？(Kafka)，你负责的这个数据是怎么用的？ 3.HBase的数据生命周期是多少？知道HBase能存多少数据量吗？MySQL和Redis知道能存放多少数据量吗？那你知道MySQL+Redis能存多少数据量吗？ 4.秒级行情为什么使用HBase?知道HBase是干什么的吗？存放那么多数据到HBase，不会发生数据问题吗？ 5.板块行情和个股行情是什么关系？板块行情里面都是什么？ 6.实操过这个项目吗？你们每天的数据量多大？（多少数据量，占多大内存） 面经总结 这次面试收获挺多的。对于项目细节这块理解的不太透，还需要回去继续努力

面试岗位：北京心更远科技发展有限公司面试岗位：大数据开发 面试背景： 校招岗位，做了一轮笔试题，几道算法题，最后一道还是挺有难度的。笔试通过后电话面试 面经问题：1.sparkSQL和sparkcore 中各自对应的并行度和分区数有什么区别 2.kettle流转到spark的DDL，对这些数据处理时，都需要注意哪些方面 3.sqoop抽取mysql一亿数据，有什么快速的解决方案 4.spark中executor内存是如何分配的 5.spark streaming计算过程中出现反压如何解决 6.spark的shuffle优化 7.spark写入clickhouse时，clickhouse的单点故障如何解决 8.kettle的搭建，工作原理 9.spring的控制反转和依赖注入怎么理解的 10.解释一下spring的拦截器和AOP 11.服务器的CPU满载如何解决 12.冒泡排序和选择排序的区别 面经总结 校招岗位和面试官电话沟通的不错，面试官也介绍了一下他们自己的业务，然后后面让等复试通知。

面试公司：北京东方网力科技股份有限公司面试难度：难 面试结果：凉了 面经问题 1.首先简单的自己介绍 2.对哪些大数据组件了解 3.HDFS里面，如果两个namenode都变成startby模式，怎么处理？ 4.hive里面的分区和分桶 5.hive的内部表和外部表的区别 6.spark运行模式大概有几种，每种模式的区别 7.在yarn上运行，运行模式是什么 8.spark里面的job，stage和task区别 9.介绍一下spark运行流程 10.平时在开发spark的时候遇到什么问题（比如内存溢出） 11.spark中堆内存和对外内存在什么地方用到？我们为什么要调整堆内存和堆外内存的使用？ 12.有两个数比较大，没有办法用常规的数据结构存储起来，把它放在string里面，位数比较多，可能有成千上万位， 做一个加法器，把这两个数加起来，入参数两个string类型的，出参是string类型，如果让你设计的话，怎么设计？ 13.有一个数组，数组里面可能是字符串，里面的数有些会重复出现，有些只会出现一次，给你一个好的算法，来设计一下，怎么能找到只出现一次的这种情况。 面试总结 Hive，spark，java，设计模式都问了，也就hive回答的还行，后边的都忘了，有的都没接触过

面试公司：中航金网(北京)电子商务有限公司面试岗位：大数据 面试过程： 电话面试的，面试官简单介绍了一下公司情况，然后就开始介绍项目内容。 简单做了一下自我介绍，面试官问了几个问题如下 1：说一下窗口，flink都有说明窗口，您在项目中用哪一个窗口？为什么用这个窗口？ 2：窗口函数您知道吗？说一下top5使用哪个函数？ 3：说完第一个夕阳木后，然后让我介绍一下离线的项目 4：你知道帆软BI吧、那么问一下，帆软BI可以直接从hive中获取数据吗？ 面经总结：电话聊的内容比较多，面试官也问了一些生产上的细节，整体沟通还可以问题不大。约了二面的时间。

面试公司：东方网力面试难度：难 面试结果：未通过 面试问题： 1.首先简单的自己介绍 2.对哪些大数据组件了解 3.HDFS里面，如果两个namenode都变成startby模式，怎么处理? 4.hive里面的分区和分桶 5.hive的内部表和外部表的区别 6.spark运行模式大概有几种，每种模式的区别 7.在yarn上运行，运行模式是什么 8.spark里面的job，stage和task区别 9.介绍一下spark运行流程 10.平时在开发spark的时候遇到什么问题(比如内存溢出) 11.spark中堆内存和对外内存在什么地方用到?我们为什么要调整堆内存和堆外内存的使用? 12.有两个数比较大，没有办法用常规的数据结构存储起来，把它放在string里面，位数比较多，可能有成千上万位， 做一个加法器，把这两个数加起来，入参数两个string类型的，出参是string类型，如果让你设计的话，怎么设计? 13.有一个数组，数组里面可能是字符串，里面的数有些会重复出现，有些只会出现一次，给你一个好的算法，来设计一下，怎么能找到只出现一次的这种情况。 面经总结： 问的知识点太全面了，掌握的不是很好，之前一直在看hive的内容了，spark的看得不多，可能也是刚面试，有点紧张，再慢慢调整吧。