《数据开发工程师面经》专题

被kpi了,还是我太菜了 sparkstreaming和flink有什么区别？ sparkstreaming如何确保只被精准消费一次 spark下的执行流程划分？ hivesql平常用的多不多，sql不合理如何进行优化 数据库设计的主要的原则 平常做项目面临的最大困难是什么，如何解决的 反问:工作的业务场景是什么？ 公司开发中使用的技术栈，回答:hive+es还有个没听清楚

1面：写题目easy+问基础知识+抓只线程池一直问到了系统资源分配，解答部门做大数据的解决方案，不涉及开发 2面：写题目easy+问简历，全程我在讲，然后没了，反问对我的了解，还说部门主要做解决方案 3面：聊人生，主管很好，推荐一下解决方案部门，感觉主管很年轻，然后给了我意见说做非技术不一定不好，校招生不要带着偏见。 整体：3面都是我单方面开摄像头，整个流程很简单，主管面也挺好的，唯一就是不搞技术

#24届找实习方向# 1. 介绍基于Spark实时项目 2. Spark在这个项目中做了哪些工作 3. Spark中，说说Action算子和Transform算子的区别？常见的行动算子有哪些？ 4. 这个项目有考虑使用Flink处理吗？ 5. Flink中窗口的种类有哪些 6. 了解数据库的底层逻辑吗 7. 说说主键索引和外键索引的区别 8. 计算机网络中OSI七层协议，说说他们的作用 9. 如果

一面 4.23 当天下午约二面 （点错成周四4.27了摔😤 lz面过最长时间的面试，足足1h40min，10:15开始，结束都快12点了🥲也不知道是面试官工作比较闲还是lz太话唠了🤣 Part1: 实习经历 团子的面试官好像对我的实习经历非常感兴趣，一直在深挖，问得非常非常细，到具体什么指标、数据是多少这样子，这一part直接干了四五十分钟😳有记不得的lz就直接说记不得…但是面试官挺好滴，

1h16min 1、将一下对大数据开发的理解 2、是通过什么接触到大数据开发的？为什么选的是实时? 3、大数据专业有没有学过flink相关课程，你是自动化学院的，如果我招你来你会不会只是学一下就算了，毕竟培养一个人要耗费很多精力 4、对于实习时长能接收多久，后续会不会考虑留在北京 5、有没有了解过美团 6、为什么项目中要使用flink，相比于其他的使用flink的好处在哪里 7、数仓分层为什么是五

上来20min先做题，两道sql，一道数学，一道概率 问数据相关，接触过什么数据库，数据体量，mysql优劣势，mapresduce数据倾斜，hive，sql内置函数 自定义函数 复盘：熟悉应用场景 问答风格无八股，侧重于考察真正理解程度 寄。

1.自我介绍 2.介绍和数据相关的项目 3.深入探讨项目 4.左外连接（口述他提供的场景结果） 5.你的数据表中常用哪些索引 6.查询和索引是有关的吗 7.优化慢查询 explain 看哪些信息？实际操作过吗？ 全程就是索引相关的问题，和看到的完全不一样，准备数仓的概念都没用到

30min拷打项目，其他八股一点没问，算法和sql也没做。 跟我说如果还有后续的话还有一个hr面。 怎么就三十分钟啊？不会KPI了吧，许愿许愿许愿

是脉脉这个公司的面试，不是脉脉上投的公司的面试。 虽然没想去，但我感觉也没资格去 面试官一直在说不做评价，不做评价，懂我意思吧。 问了java、jvm、scala偏函数 大数据问了kafka选举流程；yarn调度器；zk。哪不熟问哪，反其道而行。 偏底层组件开发，我可能偏数仓吧，技术力还没到这个程度。问的有点怀疑人生 面试官结束直接告诉我今天到这了，我说问问题呢问问题，他说理论上实习生没有提问环节

二面和一面很类似，完全不问八股文，也不让我sql，算法。 问实习经历，我说我在的部门偏业务，天天就是写sql，还有就是理解业务。 项目中的难点，感觉哪一块收获比较大，回答：刚刚的前一个月sql还有点难度，后面主要是对业务的理解。有不会的问题一定要敢问，不怕别人觉得自己是菜鸡，自己本来就是菜鸡，收获是增强了自己的沟通能力。 问了我对大数据组件相关的理解，就那些东西，hadoop，hive，spark

8.19上午十点和十二点，两次面试间隔一个小时左右，面试时长都不超过30min，面完没消息，大概率凉了。 一面： 介绍一下离线数仓项目？ 说说你理解的数仓？ 数仓为什么要分层？ mapreduce和spark的区别 怎么理解指标？ 两个相对简单的sql题 二面： 介绍一下简历中你比较熟悉的一个项目 分主题的目的是什么？ 为什么使用HBase存储维度表，怎么考虑的？ HBase原理了解吗，和其他数据

零售数据部门，看到帖子说态度很差，吓得我慌的一批 结果是个姐姐，态度很好 详细问了简历、项目、实习经历，对沟通过程、难点、技术点进行了深挖 数仓问了几个八股，不重要 然后就是什么性格、抗压能力、职业规划之类的 我反正周周面，面麻了，面试好不代表能进，爱咋咋地，巴不得地球爆炸

1.去公司线下面试，有笔试题 1.填资料，个人信息，以及有关职业发展问题 1.比如，你的缺点和优点是什么，对你个人产生怎样的影响？ 2.如果你和他人有不同的观点，你该如何和他人讨论？ 等等，基本就是情商面 笔试题 1.中科软是一家主做保险的外包公司，所以用到的sql主要是oracle, 选择题有几道oracle的题， 2.然后有简答题，也比较简单 面试环节 1.自我介绍 2.对于shell部分的提

最喜欢的一种面试方式，全程问实习和项目。 1.自我介绍+技术栈介绍+实习介绍+难点介绍（第一次做了十多分钟的自我介绍） 2.你的难点为什么不用oltp引擎解决呢，应该多拓展一下oltp的宽度（针对oltp讨论了快⑩分钟） 3.bitmap详细讨论 4.用户怎么使用你们的数据产品 5.实时了解吗 6.base地只考虑武汉还是都可以 许愿hr面 #数据人的面试交流地#

1. 维度建模和范式建模是什么，两者之间比较大的区别。 2. 为什么说维度建模可以故意引入数据冗余，而范式建模要避免数据冗余，它们这样做的目的是什么？ 3. 两道Sql题。 order_info ( order_id bigint, -- 订单id city_name string, -- 城市名 driver_id bigint, -- 司机id passenger_id bigint, --