锁屏面试题百日百刷,每个工作日保持更新面试题。请看到最初就能获取你想要的, 接下来的是今日的面试题:
1.Hbase中的memstore是用来做什么的?**
hbase为了保障随机读取的性能,所以hfile外面的rowkey是有序的。当客户端的申请在达到regionserver之后,为了保障写入rowkey的有序性,所以不能将数据立即写入到hfile中,而是将每个变更操作保留在内存中,也就是memstore中。memstore可能很不便的反对操作的随机插入,并保障所有的操作在内存中是有序的。当memstore达到肯定的量之后,会将memstore外面的数据flush到hfile中,这样能充分利用hadoop写入大文件的性能劣势,进步写入性能。
因为memstore是寄存在内存中,如果regionserver因为某种原因死了,会导致内存中数据失落。所有为了保证数据不失落,hbase将更新操作在写入memstore之前会写入到一个write ahead log(WAL)中。WAL文件是追加、程序写入的,WAL每个regionserver只有一个,同一个regionserver上所有region写入同一个的WAL文件。这样当某个regionserver失败时,能够通过WAL文件,将所有的操作程序从新加载到memstore中。
2.HBase在进行模型设计时重点在什么中央?一张表中定义多少个Column Family最合适?为什么?**
Column Family的个数具体看表的数据,一般来说划分规范是依据数据拜访频度,如一张表里有些列拜访绝对频繁,而另一些列拜访很少,这时能够把这张表划分成两个列族,离开存储,进步拜访效率。
整体来说, 通常倡议越少越好, 太多的列族会影响咱们整个hbase的读写效率,导致读取一行数据须要逾越更多的列族(底层逾越更多的内存页和文件)
3.如何进步HBase客户端的读写性能?请举例说明**
1 开启bloomfilter过滤器,开启bloomfilter比没开启要快3、4倍
2 Hbase对于内存有特地的需要,在硬件容许的状况下配足够多的内存给它
3 通过批改hbase-env.sh中的export HBASE_HEAPSIZE=3000 #这里默认为1000m
4 增大RPC数量通过批改hbase-site.xml中的hbase.regionserver.handler.count属性,能够适当的放大RPC数量,默认值为10有点小。
4.HBase集群装置注意事项?**
① HBase须要HDFS的反对,因而装置HBase前确保Hadoop集群装置实现;
② HBase须要ZooKeeper集群的反对,因而装置HBase前确保ZooKeeper集群装置实现;
③ 留神HBase与Hadoop的版本兼容性;
④ 留神hbase-env.sh配置文件和hbase-site.xml配置文件的正确配置;
⑤ 留神regionservers配置文件的批改;
5 留神集群中的各个节点的工夫必须同步,否则启动HBase集群将会报错;
5.请形容如何解决HBase中region太小和region太大带来的抵触?**
Region过大会产生屡次compaction,将数据读一遍并重写一遍到hdfs 上,占用io,region过小会造成屡次split,region 会下线,影响拜访服务,最佳的解决办法是调整hbase.hregion. max.filesize 为256m。
6.Hbase是怎么进行预分区操作?**
解: 在Hbase中次要有二种预分区计划, 一种为手动预分区, 一种为主动预分区, 手动预分区指的是咱们在建表的时候, 通过命令或者的API进行预分区操作, 在手动分区下, 咱们能够自定义分区, 也能够基于hbase提供的分区算法来实现, 分区后, 多个region会被master调配到不同的regionServer上进行治理, 从而保障负载平衡. 而主动预分区则指的是, 随着咱们表中数据越来越多 当表中数据, 也就是region中数据达到肯定的阈值后, 会主动进行分区, 阈值的多少取决于上面的这个公式来计算:
全部内容在git上,理解更多请点我头像或到我的主页去取得,谢谢**