《数据分析面试》专题

我需要根据一些共享的键列将许多数据帧连接在一起。对于键值RDD，可以指定一个分区程序，以便具有相同键的数据点被洗牌到相同的执行器，因此连接更有效（如果在之前有与洗牌相关的操作）。可以在火花数据帧或数据集上做同样的事情吗？

P01: 01背包问题 题目：有N件物品和一个容量为V的背包。第i件物品的费用是c[i]，价值是w[i]。求解将哪些物品装入背包可使这些物品的费用总和不超过背包容量，且价值总和最大。 基本思路：这是最基础的背包问题，特点是：每种物品仅有一件，可以选择放或不放。 用子问题定义状态：即f[i][v]表示前i件物品恰放入一个容量为v的背包可以获得的最大价值。则其状态转移方程便是：f[i][v]=max{

问题内容： 我长期使用面向行的数据库设计，除了数据仓库项目和大数据样本外，我没有为OLTP应用程序使用面向列的数据库设计。 我的面向行的表看起来像 我们团队中的某些人提倡面向列的数据库设计。他们建议所有列名称都应该是“属性”表中的属性名称。然后，另一个表Quote将具有两列PropertyName和PropertyValue。 在.net代码中，我们读取每个键并进行比较并将其转换为强类型对象。代码

7.22一面 spark的底层原理 spark yarn client和yarn cluster的区别 dataframe如何创建 数仓项目中用了几个节点，各个组件如何部署的 HA介绍一下 数仓分层介绍 hadoop的一些命令 hadoop如何更改文件所有者 kafka的监控 linux命令，vim编译器的命令 集群间节点是如何通信的 core-site文件一般配置什么内容 ranger权限管理的

MySQL有哪些日志，分别是什么用处？ mysql日志一般分为5种 错误日志：-log-err (记录启动，运行，停止mysql时出现的信息) 二进制日志：-log-bin （记录所有更改数据的语句，还用于复制，恢复数据库用） 查询日志：-log （记录建立的客户端连接和执行的语句） 慢查询日志: -log-slow-queries （记录所有执行超过long_query_time秒的所有查询）

日常实习 一面 7.31 1 自我介绍 2 格力实习项目介绍（深挖） 3 个人负责了哪个功能点 4 所做模型的衡量指标是什么 5 团队协作情况 6 字节实习工作内容、考核指标 7 sql 查询语句执行顺序 8 窗口函数 9反问 二面8.2 1 自我介绍 2 个人求职方向规划 3 为什么不投本专业对口岗位（我是物流本硕） 4 怎么考虑去的格力那边实习 5 所做项目具体介绍 6 讲述所做的算法框架 7

状态最不好的一次，面试官说话温温柔柔的我本来中午就没睡感觉快要睡着了 腾讯会议，对方没开摄像头（整个屏幕都是我的脸） 自我介绍 然后问了对数据开发的了解 数据建模、数据分层 然后就开始共享屏幕写sql（本来让我写hive sql，我说我不会） 三道题，写的稀碎... 主要是问题的逻辑我理解不了，再加上自己sql写的没那么熟练，在加上我真的好困啊 然后写完了 他就和我说，多练练sql，别搭虚拟机框架

Gaussdb是什么数据库 Gaussdb和Doris有什么区别 数据湖和数据仓库有什么区别 hudi中你们用的哪种表类型 hudi怎么实现实时数据更新的 HIVE有哪些模块 知道HIVE的thrift吗，有什么好处 生产中是用哪种方式连接HIVE的，会用jdbc连接吗 知道哪些spark的运行模式 yarn-client和yarn-cluster的区别是什么，从中选一个运行模式具体介绍下 sel

本人社招，面试大数据研发工程师岗位，一共三轮面试。 1、一面（技术面），约40分钟，面试题如下： （0）自我介绍，别照着简历说，补充说些简历上没有的，比如哪里人、兴趣爱好、优势有哪些等。 （1）笔试，编程题，语言自选，题目：输入一个字符串，找出其中的整数，按升序排序后输出，多个相连的数字为一个整数，排序可用类库自带方法。          实现很简单，这里就不提供答案了。 （2）笔试，SQL编程，

本文向大家介绍mysql数据库常见基本操作实例分析【创建、查看、修改及删除数据库】，包括了mysql数据库常见基本操作实例分析【创建、查看、修改及删除数据库】的使用技巧和注意事项，需要的朋友参考一下 本文实例讲述了mysql数据库常见基本操作。分享给大家供大家参考，具体如下： 创建数据库 查看数据库 修改数据库 删除数据库 首发时间:2018-02-13 20:47 修改： 2018-04-07：

大佬们看看，是不是讲偏了，不知道应该踩哪些点 讲项目的时候太大白话了，不应该等他问，应该自己主动暴露 关注技术细节 反问：面试官觉着基础不扎实，还是得好好背八股 1. 项目多少行代码 2. 项目介绍（太大白话，没有技术细节） 3. 对自己项目怎么测试的（分模块） 4. 技术难点，性能问题，忘记提并发了，光说了切片。 5. Mysql查询慢怎么办，解决方案。 只回答出来索引、SQL语句复杂、表设计数

问题内容： 我有一个具有预定义数据结构的对象： 和JSON应该是 我想以肯定的方式处理JSON错误，并且每当服务器为定义的数据类型返回意外的值时，我都希望它被忽略并设置默认值（空）。 现在，当JSON部分无效时，我得到了JSON阅读器异常： 而且我什么都没有。我想要的是获取一个对象： 并分析警告（如果可能）。可以使用JSON.NET完成吗？ 问题答案： 为了能够处理反序列化错误，请使用以下代码：

null 假设我有100张唱片。缓存只能保存40条记录（最常用）和100条记录在磁盘文件（不在任何其他数据库中）。 所以，如果从这100条记录中请求任何东西，我就不必去实际的数据库（例如Sybase db）？ 如果在100条记录中找到了密钥，但它不存在于内存缓存中（40条记录），则获取该密钥，放入内存缓存中，并使用驱逐策略将其他密钥交换到磁盘文件中（但在磁盘上，我总是有100条记录） 如果缓存和磁

本文向大家介绍JS解析XML实例分析，包括了JS解析XML实例分析的使用技巧和注意事项，需要的朋友参考一下 本文实例讲述了JS解析XML的方法。分享给大家供大家参考。具体实现方法如下： 希望本文所述对大家的javascript程序设计有所帮助。