《大数据开发工程师》专题

我计划编写一个批处理分布式计算系统，它将使用大约10-20台计算机。系统某些部分的数据流约为50GB，其他部分的数据流约为1GB。 我正在考虑使用Hadoop。可扩展性并不重要，但我真的很喜欢Hadoop framewok提供的容错和推测运行功能。MPI或gearman等框架似乎不提供这样的机制，我将不得不自己实现它们。 然而，我有一些疑问，因为它似乎是针对更大的数据量和可能更多的计算机进行优化的

我们不确定从这里到哪里去，完全被困住了。有人能帮忙吗？我们到处找了一些例子来帮忙。

一面（35 min） 1.八股 C++ 封装继承多态 虚函数相关 哈希以及如何解决哈希冲突，几种哈希冲突解决方法的适用场景 死锁如何避免 2.数据结构和算法 介绍快排思想，以及如何优化 3.项目 介绍科研项目 4.聊天 兴趣爱好 有无实习经历 科研生活 期望薪资以及该消息获取来源 二面（30 min） 平时做笔记总结的内容 介绍科研项目，遇到的困难以及所做的改进 介绍下 WebServer 项目以

base西安 1.自我介绍 2.Java集合 有哪些，都有什么特点 为什么jdk1.8后hashmap底层用红黑树 3.线程池 线程池参数 怎么创建 饱和策略 3.Mysql 引擎 隔离级别 索引 4.Spring IOC和AOP 用到哪些设计模式 5.项目 ElasticSearch相关问题（答的不好）

收集一些 Android 的经验教程和文章，例如：我为什么主张反对使用 Android Fragment 等。

09/12 投递 --> 09/21 一面 一面 自我介绍 项目主要是做什么？然后延伸聊了很多深度学习算法的东西。 到此都属于是随便聊聊。 面试题： 1. 场景题：讲讲熟悉的IO方式，如何减少磁盘IO？ 2. 知道哪些数据库？ 3. 关系数据库存储数据量大如何解决？ 我其实没咋准备数据库，这里讲了讲操作系统的多级页表。:p 4. Mysql的索引结构？ B+树 5. B+树与传统二叉树有什么区别，

用的飞书系统，双方都没开摄像头，50min 1. 自我介绍 2. 开始挖项目 模型的数据来源，评价指标，怎么考虑这些变量的，效果怎么样 知道卡尔曼滤波吗（简历里写了但用得很早了，忘了很多） 知道哪些最优化方法 讲一下牛顿法和高斯-牛顿法 3. 然后聊了一些价值观相关 求职时最看重什么 你以后想做什么 了解momenta吗 对之前实习公司的评价 之前的实习能留用吗？为什么还出来继续面试 4. 问了一

上来面试官先问为啥要转来开发岗 与科班的相比你有什么优势等 接着狂问项目 做的是大营销的抽奖项目 ：在项目中遇到了什么困难？ ：有些空指针的问题比较难处理 ：那对于空指针的问题有什么处理心得？ ：… ：看你简历中写了这个项目易于拓展和开发 怎么体现？ ：… ：你说的这个抽奖流程是一次的，怎么做10次的？在代码中怎么体现的？ ：… ：怎么处理的库存？ ：… ：假如给你个数组里面有十亿个数据，怎么处理

时间：2024/08/13 11:00（55分钟） 了解项目 手撕：矩阵乘法，合并有序链表 八股：线程池（不太会）、查看端口指令（忘了）、访问网页的全过程协议、http方法（get、post等，区别没太了解），多线程的很多东西依然pass 又是被八股问得汗流浃背的一天，本来有些东西是会的，一紧张还是没答好

时间：2024/08/07 16:00（60分钟） 八股：面向对象、多态、内存管理、智能指针、C++11特性、三次握手四次挥手 手撕：本来是单例模式，但我不会，换成了手撕快排 嘱咐我后面可能会有更多工程上的考察

主要内容：添加数据源PyCharm支持各种类型数据库的接口支持。 当用户授予对创建的数据库的访问权限，它就会使用提供代码完成的SQL编写工具提供数据库的模式图。 在本章中，我们将重点介绍MySQL数据库连接，其中涉及以下步骤。 添加数据源 请注意PyCharm支持各种数据库连接，这一点很重要。 第1步 打开数据库工具窗口:View -> Tool Windows -> Database，并打开名为数据源和对话框的对话

数据库工具类提供了一些方法用于帮助你管理你的数据库。 初始化工具类 使用数据库工具类 获取数据库名称列表 判断一个数据库是否存在 优化表 修复表 优化数据库 将查询结果导出到 CSV 文档 将查询结果导出到 XML 文档 备份你的数据库 数据备份说明 使用示例 设置备份参数 备份参数说明 类参考 初始化工具类 重要 由于工具类依赖于数据库驱动器，为了初始化工具类，你的数据库驱动器必须已经运行。 加

数据库工厂类提供了一些方法来帮助你管理你的数据库。 Table of Contents 数据库工厂类 初始化数据库工厂类 创建和删除数据库 创建和删除数据表 添加字段 添加键 创建表 删除表 重命名表 修改表 给表添加列 从表中删除列 修改表中的某个列 类参考 初始化数据库工厂类 重要 由于数据库工厂类依赖于数据库驱动器，为了初始化该类，你的数据库驱动器必须已经运行。 加载数据库工厂类的代码如下:

数据最终是需要一套UI来展示的，而这种实时数据的展示，已经有不少项目了。 比如： 官方的Chronograf Grafana 其它...

释义 数据源（DataSource）的概念来自于JDBC规范中，一个数据源表示针对一个数据库（或者集群）的描述，从数据源中我们可以获得N个数据库连接，从而对数据库进行操作。 每一个开源JDBC连接池都有对DataSource的实现，比如Druid为DruidDataSource，Hikari为HikariDataSource。但是各大连接池配置各不相同，配置文件也不一样，Hutool的针对常用的连