电话面,26min,八股文大杂烩。 GMP,有锁吗? channel底层,啥时候阻塞 map安全吗,有序吗,哪些能当key sync.Map读取逻辑 你自己设计map会怎么设计? 索引大杂烩 幻读,解决方案 联合索引,索引下推 回表 Redis数据结构,应用场景 消息队列怎么实现,分布式锁怎么实现,限流怎么实现 持久化,会阻塞吗 为什么是三次握手?TIME_WAIT状态意义? 四次挥手可不可以是三
1. 云云对接 1.1. 简介 1.2. 对接步骤 1.3. 相关文档 云云对接,即厂商自建设备云服务与 Homebase 云服务的对接,厂商智能家居设备连接自建云服务后,适配若琪智能家居协议,实现与 Homebase 云服务的对接。 1.1. 简介 1.2. 对接步骤 完成 企业认证 点击左下角 智能家居接入 点击 接入新品牌 填写品牌基本信息 品牌类型 公有:可以作为智能家居对外输出方案对外输
大概20分钟,三人一组,同样也是每人自己我介绍后,轮流询问问题: 项目中的组件是怎么使用的; 索引种类,索引失效情况; 数据库种类; 跟组里其它同学方向不太一样,主要问了他们一些数据分析和计网的问题; 基本就是这样啦,时间相对比较短,每人大概会问三个问题 11.25更新-->收到体检通知 12.09更新-->收到签约通知 12.16更新-->准备签约 #面经##秋招#
1.1 定义 Docker 开发、打包、运行 APP 的平台。 把 APP 和底层设备隔离开来。 1.2 架构 1.2.1 重要概念 1.2.1.1 Image 文件和 meta data 的集合(root filesystem)。 分层,每层可以添加删除修改文件,成为一个新的 image。 不同的 image 可以共享相同的 layer。 image 本身是一个 read-only 的。 1.2
1.1 倒排索引原理 1.2 倒排索引构成 单词词典,记录所有文档的单词,记录单词到倒排列表之间的关联信息。 BTree,倒排索引项(Posting)。 文档 Id,用户获取原始信息 单词频率,记录该单词在该文档中出现的次数,用户后续相关性分析 位置,记录单词在文档中的分词位置,用于做词语检索。 偏移(Offset),记录单词在文档的开始和结束为止,用于高亮显示。 对每个属性建立倒排索引。 分词器
角色 功能 Queue 同一个Queue的生产者和消费者进行通信。
在没有 Yarn 的情况下,集群的资源无法在 MapReduce、Storm、Spark 等计算框架之间协调使用。有 Yarn 之后,集群上所有的资源以 Container 为单位, 交由 Yarn 统一管理。每个计算框架实现 ApplicationMaster 接口,便可向 Yarn 申请资源。 参考资料 Hadoop YARN配置参数剖析(1)—RM与NM相关参数 Hadoop YARN配置参
FastDFS是一个开源的轻量级分布式文件系统,功能包括:文件存储、文件同步、文件访问(文件上传、文件下载)等,解决了大容量存储和负载均衡的问题。特别适合中小文件(建议范围:4KB < file_size <500MB),对以文件为载体的在线服务,如相册网站、视频网站等。 2. 架构介绍 FastDFS由跟踪服务器(Tracker Server)、存储服务器(Storage Server)和客户端
1.1 Hadoop简介 2005年,Lucene 的创始人 Doug Cutting 主持开发完成了首款支持海量数据存储计算的分布式开源框架—Hadoop。Hadoop的初始定位是服务于大量的具有廉价硬件设备的服务器,且对存储的数据具有较高的容错性,随着 Hadoop功能的逐步完善,目前 Hadoop已经晋升为 Apache的顶级项目。Hadoop框架主要包括 Hadoop分布式文件系统(HDF
Redis 监控
1.2.2 Hbase 数据存储目录解析 目录 内容 .tmp 对表进行创建或删除操作时,将表放入 tmp 中。 WALs 操作日志。 archive 存储表的归档与快照,Hbase 在分割或合并操作时,将新生成 HFile 写入 archive 中,删除之前的 HFile 。 corrupt 损坏的日志文件。 data 存储系统表数据和用户表数据。 hbase.id 标识 hbase 进程。 h
MongoDB 是由C++语言编写的,是一个基于分布式文件存储的开源数据库系统。在高负载的情况下,添加更多的节点,可以保证服务器性能。MongoDB 旨在为WEB应用提供可扩展的高性能数据存储解决方案。MongoDB 将数据存储为一个文档,数据结构由键值对组成。MongoDB 文档类似于 JSON 对象。字段值可以包含其他文档,数组及文档数组。 MongoDB支持各种编程语言,RUBY,PYTHO
Hawq 技术解析
Impala 性能调整(翻译)
Greenplum数据库软件是业内首创的大规模并行处理(massively parallel processing (MPP))的数据库软件产品,它包含大规模并行计算技术和数据库技术最新的研发成果:包括无共享/MPP,行列存储数据库,数据库内压缩,MapReduce,永不停机扩容,多级容错等等。该软件产品被业界认可为扩展能力最大的分析型(OLAP)数据库软件。已有100多家世界级重大客户采用该软件