《数据开发工程师面经》专题

最开始是在7.14投的豆包大模型，当时hr打电话喊我面实习岗，我一脸懵，后面才知道是转岗投递了。因为没有实习打算，相当于直接挂了这个志愿。 一直到8月10多号，被另一个好心hr捞起来面二志愿，最开始是走筋斗云计划。 时间线：8.20一面，8.21二面，8.27通知挂了选择转正式批，9.2三面，9.3通知挂了。效率很高！主要还是业务匹配度不高，早挂早好，希望其他同学顺利！ 一面 1.自我介绍 2.论

面了差不多有四十分钟 ①首先问了下项目flume 和 kafka相关，由于很久没复习这两个组件，回答的不好 ②说一下HDFS读写原理 ③JVM内存区域介绍一下 ④有哪些垃圾回收器，你就说CMS就行了，他的基本原理以及优缺点，其中四个阶段哪些阶段需要stop the world ⑤Java对象内存是如何分配的，有哪些分配方法？ ⑥分配对象的过程中会出现并发问题吗，JVM是如何解决的？ ⑦有用过JVM

一面1h [项目] - [ ] 项目设计和技术栈的使用 - [ ] FastDFS的架构设计 - [ ] 追踪器是单点还是多点，占多少内存量 - [ ] 源文件保存在哪儿 - [ ] 文件上传下载的步骤，以及数据库的映射关系 - [ ] 怎么实现IO多路复用 - [ ] 了解的数据结构 - [ ] 红黑树的时间复杂度为什么是logn 算法- [ ] 1-n个数，有m条边描述相连的两个数，输入任意两

字节大数据开发工程师- 人力科技面经 一面 网络模型，每一层的功能 访问一个网页的流程 tcp是如何保证可靠 线程和进程的区别 JVM的内存区域 垃圾回收算法 类加载的过程 Spark和MR的区别 Spark任务调度过程 spark中stag，job，task是如何划分的 spark宽窄依赖 为什么spark比MR快 Hadoop的框架 Hadoop提交作业的流程 Hadoop中是如何找到文件对应

笔试：选择题+填空题+判断题+简答题 简答题 1、说说大数据技术的特点 2、说一下Spark任务执行的流程 3、1G的文件，每一行是一个词，词大小不超过16字节，内存1M，找出频数最高的100个词。 技术面 1、自我介绍 2、本专业主要学什么？ 3、介绍一下实习的项目 4、小文件问题怎么处理？（SequenceFile、CombineInputFormat、JVM重用） 5、Hive支持哪些存储格

1、自我介绍 2、什么是维度建模？什么是关系建模？ 3、星型模型和雪花模型有什么区别？ 4、数据仓库分层的意义是什么？ 5、对哪些大数据框架比较熟悉？（答了Hadoop和Kafka） 6、Hadoop的进程有哪些？作用分别是什么？ 7、Kafka的特点是什么？ 8、Kafka为什么可以支持海量数据吞吐？ 9、问实习工作内容，以及实习收获 10、能否接受加班？ 11、有什么问题要问我的？问了日常工作

1 介绍下你自己 我按照常规的套路，先自我介绍，然后介绍我的项目，想引导着问些八股，但是好像没用😂 2 32位和64位你能联想到什么，从机组操作系统，数据结构等角度，开放性的谈一下你的理解😂😂 这个问题直接问了15分钟 3 手撕代码 给你一个应用场景，设计合适的数据结构，并完成两个功能函数 看出来是树了😂😂，但是没咋刷算法，以为只问sql，我的格局小了，写了二十分钟，一点不会😂😂 总

选择题（15道）： 以xx为基准的一趟快排后的结果 分块查找的比较次数 给定入栈元素计算出栈序列的可能性 简单无向图的邻接矩阵零元素数量 哈夫曼编码一个字符串所需的编码长度 ping没有用到的网络协议 操作系统创建进程的过程 电话号码前缀查重需要的内存 （别的忘了，整体还好，纯408真题） 填空题（5道）： 二叉排序树的查找 多线程的四种同步方式 IP子网划分求掩码 （别的忘了，都不难） 简答题（

一面 12月28日 15：00 1h 了解分布式吗，看过哪些相关的分布式数据库和知识 看过哪些论文 深挖minisql项目 2PL 脏读，幻读，不可重复读 这个项目是怎么实现的，从0到1吗，介绍一下实现的过程 支持哪些SQL数据类型 日志系统的设计（支持哪些日志格式） 如果用户写入一个大的blob日志怎么处理 fsync怎么处理的 redo log在commit之前还是之后处理的 是否有丢失数据的

我们有一个将文件复制到Azure文件服务器的外部源。文件大小约为10GB。我想在Azure文件服务器上使用Azure Data Factory完成文件复制后，立即将此文件复制到Azure Blob存储。供应商无法将此文件复制到Blob容器。有人能帮我配置什么类型的触发器吗。我可以手动复制，但我正在寻找是否可以实现自动化。我甚至不能安排这个活动，因为来自外部源的文件副本是随机的。 谢谢

25.9.1. msql2mysql：转换mSQL程序以用于MySQL 25.9.2. mysql_config：获取编译客户端的编译选项在本节中，介绍了开发MySQL程序时可能会有用的一些实用工具。 ·msql2mysql 1种shell脚本，用于将mSQL程序转换为MySQL程序。它不能处理所有情况，但能为转换提供良好的开端。 ·mysql_config 1种shell脚本，能生成编译MySQ

本文向大家介绍Android开发中多进程共享数据简析，包括了Android开发中多进程共享数据简析的使用技巧和注意事项，需要的朋友参考一下  背景 最近在工作中遇到一个需求，需要在接收到推送的时候将推送获得的数据存起来，以供app启动时使用。我们会认为这不是So easy吗？只要把数据存到SharedPreferences中，然后让app打开同一个SharedPreferences读取数据就可以了

本文向大家介绍微信小程序云开发（数据库）详解，包括了微信小程序云开发（数据库）详解的使用技巧和注意事项，需要的朋友参考一下 开发者可以使用云开发开发微信小程序、小游戏，无需搭建服务器，即可使用云端能力。 云开发为开发者提供完整的云端支持，弱化后端和运维概念，无需搭建服务器，使用平台提供的 API 进行核心业务开发，即可实现快速上线和迭代，同时这一能力，同开发者已经使用的云服务相互兼容，并不互斥。

面试官是做算法服务开发，也就是工程化落地的，但是总感觉他无精打采的样子。全程 35 分钟，能有 33.5 分钟都是让我输出，讲了很多实习项目，但是基本不深入问，点到为止，我就像讲单口相声一样。 Intern： B 站和百度实习项目 & 自己的工作 & 个人收获 Deep Learning： 介绍一下 Transformer 什么是多头注意力机制、在模型推理上有什么优势 并行训练时如何拆分多头注意力

面试时间：2022.7.27 岗位：系统研发工程师 总共14分钟的面试时间。 自我介绍 去过哪些公司实习？为啥本科毕业那年没去实习？ Cache内数据存储格式，和内存之间怎么进行交互？ C++ oneway关键字的作用 OSI七层模型 SSL在哪一层？ TCP四次挥手。Server是否可以主动断开连接？主动断开要几次？ TCP的拥塞控制算法 算法题1：单向链表，如何反向读取？ 递归，用栈空间，时间