《大数据》专题

1.自我介绍 2.实习最大收获 3.odps平台的性能调优与spark的性能调优的共同点和差异点 5.spark的countdistinct算子优化 6.bitmap作用在expload的作用是什么？ 7.小文件过多的影响 8.sql countdistinct优化代码手写 9.反问 #大数据开发##数据人的面试交流地#

对Hadoop的了解 MapReduce的工作流程 虚拟内存的工作原理页面置换算法（LRU、FIFO、LFU、最佳置换） Hive的功能和优点常见的数据结构（数组、栈、队列、链表、树、图、堆、散列表） 堆的概念及分类常见的排序算法（冒泡排序、选择排序、快速排序） 平衡二叉树的定义查找平衡二叉树节点的时间复杂度

一面——60mins 自我介绍 拉链表的制作，数据量有多少，为什么不用快照表呢 项目有哪些表 数仓分层有哪些，具体做了什么，数仓分层作用 怎么设计表，怎么建模，DIM DWD层的主题分了哪些 如何做的可视化 什么是数据倾斜，数据倾斜的解决方案 Hadoop和spark的区别 Spark的shuffle流程是怎么样的 对哪些数据库了解 Shuffle有哪几种类型 在shuffle的过程中会进行排序吗

1.自我介绍 2.你对redis宕机后的方法 我：...... 3.你说到算法。你有刷过letcode算法？ 我：很少刷letcode，一般都是刷sql的 3.kafka的副本同步 我：忘了 4.谈谈你对数仓的理解 我：..... 5.谈谈你对hbase和clickhouse的理解 我：.... 6.你说你对hive中的ads层数据导入到MySQL，为什么不是直接从hive的ads层中访问 我：不

分享一下今天的面试情况，总体其实不难，但真的太过紧张，发挥极其不好。 首先上来是一段自我介绍，然后闲聊一些我的能力还有个人对于科研的看法，以及导师的管理松紧。 之后就是正式的面试内容： 1.TCP为什么要三次握手？这个题太经典了，想必背过八股的都知道，但我真的太紧张，完全不知道从哪里开始说起，所以结结巴巴的搞完了。 2.线程和进程的区别？这个也很简单对吧，不过我感觉我说的不够全面。 3.Mysql

一面：(1h) 1.自我介绍 2.选一个熟悉的项目介绍一下吧 3.看你简历上写了进行过数仓的搭建，那你说一下数仓分几层合适？ 4.每一层干了那些事儿？ 5.你说一下数仓为何要进行分层？ 6.数仓的建模方法知道吗？ 7.指标分类有哪些？（回答的是原子指标，派生指标，衍生指标） 8.你的ods层为何选择gzip压缩呢？ 9.除了gzip压缩还有哪些压缩方法？介绍他们的区别？10.项目中你的hive表使

问题内容： 在C中，整数（对于32位计算机）为32位，范围为-32,768至+32,767。在Java中，整数（long）也是32位，但范围为-2,147,483,648至+2,147,483,647。 我不了解Java中的范围有何不同，即使位数相同。有人可以解释吗？ 问题答案： 在C语言中，语言本身无法确定某些数据类型的表示形式。它因机器而异，在嵌入式系统上int可以为16位宽，尽管通常为32位

主要内容：BigInteger 类,BigDecimal 类在 Java 中提供了用于大数字运算的类，即 java.math.BigInteger 类和 java.math.BigDecimal 类。这两个类用于高精度计算，其中 BigInteger 类是针对整型大数字的处理类，而 BigDecimal 类是针对大小数的处理类。 BigInteger 类 如果要存储比 Integer 更大的数字，Integer 数据类型就无能为力了。因此，Java 中提供

table.getn(t) 等价于 #t 但计算的是数组元素，不包括 hash 键值。而且数组是以第一个 nil 元素来判断数组结束。# 只计算 array 的元素个数，它实际上调用了对象的 metatable 的 __len 函数。对于有 __len 方法的函数返回函数返回值，不然就返回数组成员数目。 Lua 中，数组的实现方式其实类似于 C++ 中的 map，对于数组中所有的值，都是以键值对的

问题内容： 如果我的行数超过10亿，应该使用哪种方式获取表中的行数？ 更新：例如，如果上面的查询存在“超时问题”，是否有任何方法可以对其进行优化？如何更快地做到这一点？ 问题答案： 如果需要准确的计数，则必须使用 如果您可以粗略计算，则可以使用分区中的行总和 如果您想对自己的内容感到有趣，可以执行以下操作

我试图从Geeksforgeeks中解决最大整数值问题。 问题如下：给定一个数字（0-9）的字符串S，您的任务是找到可以从字符串中获得的最大值，方法是将“*”或“”运算符放在数字之间，同时从字符串的左到右遍历并一次拾取一个数字。 输入：输入的第一行包含T表示测试用例的数量。T测试用例紧随其后。每个测试用例包含一行表示字符串的输入。 输出：对于每个测试用例，打印获得的最大值。 这就是我所做的： 输入

问题内容： 对SQL语句中要删除的行数应设置什么限制？ 我们需要从1删除到几十万行，并且需要应用某种最佳实践限制，以便在每次清空废纸bas时不会绝对终止SQL Server或填充日志。 此问题并非特定于任何类型的数据库。 问题答案： 这是一个非常广泛的问题，基本上可以归结为“取决于”。影响它的因素包括： 您的并发级别是多少？delete语句在受影响的行上设置排他锁。根据数据库引擎，删除的数据分布等

我想知道什么是最大的行数，你可以创建与apache poi 3.8和什么是最大的行数，你可以创建与apache poi 3.0生成excel文件。

在C语言中，整数（对于32位机器）是32位，其范围为-32,768到+32,767。在Java中，整数（长）也是32位，但范围从-2,147,483,648到+2,147,483,647。 我不明白Java中的范围是怎么不同的，尽管位数是一样的。有人能解释一下吗？

我试图在Java中完善BigInteger，以下是我执行的代码 因此，输出prec1 = 49.32和prec2 = 49.33，对于我的使用情况，我需要始终舍入到49.33，那么除了设置两次比例之外，还有其他方法舍入到49.33吗？