prince的文章

网络 避免网络问题降低Hadoop和HBase性能的最重要因素可能是所使用的交换硬件，在项目范围的早期做出的决策可能会导致群集大小增加一倍或三倍（或更多）时出现重大问题。 需要考虑的重要事项： 切换设备的容量 连接的系统数量 上行链路容量 ...

赞(0)princeHBase 教程 阅读(259)

操作系统 内存 HBase一定需要RAM！ 64位 使用64位平台（和64位JVM）。 交换 # 注意交换，将swappiness设为0。 CPU 确保已将Hadoop设置为使用本机的硬件校验和。 文章永久链接：https://ddkk.c...

赞(0)princeHBase 教程 阅读(254)

限制协处理器的使用 在多租户环境中，限制任意用户协处理器可能是一个很大的问题。HBase提供了连续的选项，以确保只有预期的协处理器运行： hbase.coprocessor.enabled：启用或禁用所有协处理器。这将限制HBase的功能，...

赞(0)princeHBase 教程 阅读(232)

部署协处理器的准则 捆绑协处理器 您可以将协处理器的所有类捆绑到RegionServer类路径上的单个JAR中，以便于部署。否则，将所有依赖项放在RegionServer的类路径中，以便在RegionServer启动期间加载它们。Regio...

赞(0)princeHBase 教程 阅读(247)

示例 HBase提供了Observer Coprocessor（观察者协处理器）的示例。 下面给出更详细的例子。 这些示例假设一个名为users的表，其中有两个列族personalDet和salaryDet，包含个人和工资详细信息。下面是u...

赞(0)princeHBase 教程 阅读(224)

加载协处理器 要使您的协处理器可用于HBase，必须静态（通过HBase配置）或动态（使用HBase Shell或Java API）加载它。 静态加载 请按照以下步骤静态加载协处理器。请记住，必须重新启动HBase才能卸载已静态加载的协处理...

赞(0)princeHBase 教程 阅读(239)

协处理器的类型 观察者协处理器 在特定事件发生之前或之后触发观察者协处理器。在事件之前发生的观察者使用以pre前缀开头的方法，例如，prePut。观察者发生在以post前缀（如postPut）开头的事件覆盖方法之后。 用于观察者协处理器的用...

赞(0)princeHBase 教程 阅读(280)

协处理器概述 在HBase中，使用“Get”或者“Scan”获取数据，而在RDBMS中使用SQL查询。为了仅获取相关数据，您可以使用HBase Filter过滤它 ，而在RDBMS中使用WHERE谓词。 获取数据后，您可以对其执行计算。这种...

赞(0)princeHBase 教程 阅读(254)

SparkSQL / DataFrames HBase-Spark连接器（在HBase-Spark模块中）利用Spark-1.2.0中引入的DataSource API （SPARK-3247），弥补了简单HBase KV存储和复杂关系SQ...

赞(0)princeHBase 教程 阅读(254)

使用Spark将数据批量加载到HBase有两种选择。有一些基本的批量加载功能适用于行具有数百万列的情况和未整合列的情况，以及Spark批量加载过程的映射侧之前的分区。 Spark还有一个精简记录批量加载选项，第二个选项是为每行少于10k列的...

赞(0)princeHBase 教程 阅读(251)