常见问题解答

下表有助于根据工作节点数、每个节点中的 RAM 和虚拟核心以及每个工作节点上分配的执行器数量计算推荐设置。

是的， MicroStrategy Hadoop Gateway 支持在服务空闲时释放集群资源。您必须配置 MicroStrategy Hadoop Gateway 执行器和核心动态分配以实现此行为。修改 MicroStrategy Hadoop Gateway 配置文件 <MicroStrategy Hadoop Gateway 安装路径>/conf/hgos-spark.properties，并取消注释动态分配部分。

是的， MicroStrategy Hadoop Gateway 支持 Live Connect Cube Strategy 10.9.无需额外配置即可启用它。

最低要求 MicroStrategy Hadoop Gateway 是256 MB的磁盘空间和2 GB的内存。

MicroStrategy Hadoop Gateway 不会在 NameNode 或 DataNode 上启动任何额外的进程。 MicroStrategy Hadoop Gateway 只需向 Spark 提交作业。

DataNode内存使用量取决于客户设置的属性文件数量 spark.executor.内存 在配置文件中（默认情况下为 1 GB）。同时，NameNode的内存使用率不会受到明显影响。

什么时候 MicroStrategy Hadoop Gateway 启动时，一些 JAR 文件将上传到 HDFS 以 hdfs://HDFSNameNode:8020/user/${user_name_start_hgos}/.sparkStaging。默认情况下，文件 sparkStaging 将被自动删除 MicroStrategy Hadoop Gateway 服务已关闭。

JAR 文件的总大小不会大于 256 MB。

不， MicroStrategy Hadoop Gateway 不会自动刷新 Kerberos 主体票证。您必须通过运行 基尼特 命令或创建一个 cron 作业来按计划刷新票证。

模板 kinit_cron脚本：

function setup_kerberos() {
        echo "klist:"
        klist
 
echo "KRB5CCNAME env:"
        export KRB5CCNAME="$HGOS_HOME/conf/krb5cc_hgos"
        echo $KRB5CCNAME
 
        echo "kinit"
        kinit -kt  $keytab_path $principal_name -l 1d5h -r 2d -f
 
        echo "klist"
        klist
}
setup_kerberos

要安排 cron 作业，请运行：

root@HOST # crontab -l 0 */2 * * * <path to file>/kinit_cron.sh

是的， MicroStrategy Hadoop Gateway 通过Apache Sentry支持HDFS ACL，无需额外配置。观看下面的视频来了解如何 MicroStrategy Hadoop Gateway 与 Apache Sentry 协作。

不。 MicroStrategy Hadoop Gateway 基于 Spark 1.6 构建，仅适合部署在 Spark 1.6 环境中。我们正在努力发布 MicroStrategy Hadoop Gateway 在 Spark 2 上。