《数据开发工程师》专题

巨人网络\春招\数据开发\笔试\hard 数仓-SQL面试题-实录 字段：uid 用户ID、artical_id 文章ID、in_time 进入时间、out_time 离开时间、sign_cin 是否签到 问题：统计每天的日活数及新用户占比 注： 新用户占比 = 当天的新用户数/当天活跃用户数（日活数） 如果in_time 进入时间 和 out_time 离开世界跨天了，在跨天的每天都记为该用户活

一、前言 在继续阅读之前，请先思考一下是否曾经遇到过以下问题： 对大数据源码一无所知 不擅长突出项目亮点 缺乏算法刷题技巧 难以理解面试笔记V5.0中的答案 ...... 如果你曾经或者正在面对以上问题，那么面试笔记V6.0可能会成为你的解决之道 大数据开发面试笔记V5.0发布已有半年，现在V6.0终于推出，本次更新的主要内容如下： 二、核心目录 V6.0笔记包含大数据篇、计算机语言篇、计算机基础

介绍项目 说一下遇到的难点 项目的核心指标就是**的占有率吗？ 怎么验证数据的准确性？ 有遇到过数据对不齐的时候吗，怎么发现的。 讲一下数仓分层的好处 如果需求方想临时插一条数据进数仓，怎么解决。答找后端更新数据，我再重刷。 除了这个办法呢？能不能在数仓中直接insert一条数据。 为什么不建议直接往同一个分区追加新的数据？ 为什么要选择数据开发？别人都说数据开发是sql boy，你怎么看这句话。

一面6.14 45min 挖简历项目 机器学习线性模型口诉原理（简历提到机器学习） 手写最大子数组和（ac通过），要求nlogn复杂度。（提示递归，未答出） 无八股 二面6.18 1h 挖简历项目（详细介绍项目、随口问了下springboot与jdk版本 、MongoDB原理，elasticsaerch等） 场景题：抢购平台，有哪些与异常相关的字段，比如用户订单等信息。如何设计异常检测大数据平台

    2023年4月，大数据开发面试笔记V3.0发布，过去已经两个月，V4.0终于来了，这次主要新增了企业级调优手法以及数据湖基础等内容。如今面试越来越难，常常会被问到大数据的前沿知识比如数据湖，以及企业级调优手段有哪些等，于是我结合自己在大厂的工作经历进行了补充，最终汇聚成一份全面的大数据开发面试笔记。     此笔记包含大数据开发、Java、计算机基础、数仓理论、常考SQL、大数据开发场景题

在boss上投了简历，沟通之后，今天接到了可以线上面试的电话 （面试官说之前打电话都没有人接，因为之前我一直开的手机免骚扰，最近才发现这个问题，友友们记得看看拦截的设置，真的会错过面试电话） 问题（顺序有点乱，因为有的后面才想起来是前面问的） 1.自我介绍 2.介绍一下做的项目 3.项目详情 4.学校教授的课程有哪些、学python多久了、有哪些是用python的、python的基本知识 （插一个

我在 Azure 数据工厂中具有事件触发器，它在 Azure Blob 存储中创建新 Blob 时触发。但我的触发器在创建 Blob 时没有触发。 已按照以下链接进行操作，但卡在下面提到的点：Azure 数据工厂：事件未启动管道。 环境详情： 事件网格已注册，ADF为v2并将参数传递给管道。我的问题是我是否需要激活Azure存储事件订阅？如果是这样，我的事件处理程序应该是什么（在我的情况下是ADF

我的管道是IoTCore->pub/sub->Dataflow->bigQuery。最初，我得到的数据是Json格式的，管道工作正常。现在我需要转向csv，问题是我使用的Google定义的数据流模板使用Json输入而不是csv。是否有一种简单的方法通过数据流将csv数据从pub/sub转移到bigquery。模板可能会改变，但它是用Java实现的，我从来没有用过，所以需要很长时间来实现。我还考虑过

我正在尝试重新开始使用Spring Boot开发工具。我一直遵循此处提供的说明：https://docs.spring.io/spring-boot/docs/current/reference/html/using-boot-devtools.html 我正在使用gradle，并将其包含在我的build.gradle文件中： 我创建jar文件并运行jar文件： 我能够通过Intellij连接到正

问题内容： 我正在创建一个Web应用程序，并且很好奇如何在其中将数据发送到MySQL数据库。我有一个在用户按下按钮时调用的函数，我希望该函数以某种方式将数据发送到MySQL服务器。有谁知道如何解决这个问题？我尝试了npm MySQL模块，但似乎连接不正确，因为它是客户端。还有其他方法吗？我需要一个主意才能开始。 问候 问题答案： 您将需要一个服务器来处理来自React应用程序的请求并相应地更新数据

函数插件开发 函数插件主要运用于“采集规则»数据处理”的使用函数和条件判断中，方便扩展出更多实用功能！ 在2.2旧版本中很多用户会直接在程序中二次开发出许多php函数供调用，这样确实很方便快捷的实现功能，但是不利于以后的扩展和维护，比如程序更新后php函数就被覆盖掉或失效了， 2.3版本对此进行改进加入了函数插件机制，您可以将功能封装成类做成插件来使用，插件形式可以更好扩展、复用以及传播！ 使用“

微信小程序开发工具快速二维码编译跳转的页面是指定页面?还是怎么弄的 我发现我们公司的通二维码编译跳转到了这个页面 这个页面路径需要自己设置吗? 小程序模拟器上的页面路径却不是这个jump的路径 而是其他的路径 pages/login/login-check/login-check

10道选择题70分，两道编程题30分，共一个小时，对于这分值分配有点不理解。 编程题不难，但是很奇怪a不了，有同学和我一样吗 第一题： 题目： 小红有一个链表，链表中每个结点有一个整数值。小红想要通过删除其中的某些结点，使得剩余链表的相邻结点的数据值的和为奇数。满足条件的删除方法可能有多种，小红想要保留尽量多的结点。 解决思路 最终的链表无非就是奇数值结点开头或者偶数值结点开头两种，然后后面奇数值

面试大概二十分钟左右，问的不难，但最近被封控在宿舍，人比较down，没回答好，估计凉了，问题如下： 为什么转专业 哪里人，为什么想留在成都 会什么编程语言 Java的Object类有什么方法 Java如何跳出多重循环 什么是乐观锁 Spring实现依赖注入的方法 @Autowired和@Resource注解的区别 项目中Redis的作用 数据只存在Redis当中吗，服务器关机数据会丢失吗 Pyth

2022年9月26日 星期一 19:00 视频面试 岗位描述： 1、负责参与产品的测试设计，测试用例编写及评审； 2、负责测试环境的搭建、针对业务产品进行功能和非功能测试； 3、负责业务线稳定性功能测试。 任职要求： 1、计算机相关专业，本科及以上学历； 2、具备一定的编程能力，熟练掌握Java/ C/C++或各类脚本语言中一种； 3、熟悉软件测试理论与方法，对互联网相关业务或技术充满好奇及热情；