kylin 安装相关资料

本文主要介绍kylin 安装相关资料 方法和在新技术下所面对的“挑战”,方便大家深入理解kylin 安装相关资料 过程。本文也将分享kylin 安装相关资料 所遇到的问题和应对策略。
通过深入本文可以理解代码原理,进行代码文档的下载,也可以查看相应 Demo 部署效果。

su hdfs 使用hdfs安装防止创建hdfs目录权限问题

tar -zxvf apache-kylin-3.1.0-bin-hadoop3.tar.gz
hive添加自定义参数 hive-site新增自定义参数 
<property> 
 <name>hive.security.authorization.sqlstd.confwhitelist</name>
 <value>mapred.*|hive.*| mapreduce.*|spark.*</value> 
</property>  

<property> 
 <name>hive.security.authorization.sqlstd.confwhitelist.append</name>
 <value>mapred.*| hive.*|mapreduce.*|spark.*</value> 
</property> 

./check-env.sh 检查环境
./kylin.sh start 启动脚本
./kylin.sh stop 停止脚本

1.执行./sample.sh 错误
erro 
 Cannot modify dfs.replication at runtime

解决方法
https://www.jianshu.com/p/ef383f6b91cc
修改conf/kylin_hive_conf.xml
注释掉dfs.replication这个属性,还有mapreduce.job.split.metainfo.maxsize这个属性也注释掉

2.kylin  Cannot modify mapreduce.job.name at runtime 
hive添加自定义参数 hive-site新增自定义参数 
<property> 
 <name>hive.security.authorization.sqlstd.confwhitelist</name>
 <value>mapred.*|hive.*| mapreduce.*|spark.*</value> 
</property>  

<property> 
 <name>hive.security.authorization.sqlstd.confwhitelist.append</name>
 <value>mapred.*| hive.*|mapreduce.*|spark.*</value> 
</property> 

原文链接:https://blog.csdn.net/zhouyuanlinli/article/details/102952151

3 流式调用kafka中的数据

第一步

https://blog.csdn.net/qq_28356739/article/details/89534665  需要修改页面

第二步

vim sample-streaming.sh文件修改

hdp使用连接kafka使用6667端口 ${dir}/kylin.sh org.apache.kylin.source.kafka.util.KafkaSampleProducer –topic kylin_streaming_topic –broker ambari1:6667

手动安装kafka端口为9092

测试kafka是否正常方法:

创建topic

sh kafka-topics.sh –create –zookeeper localhost:2181 –replication-factor 1 –partitions 1 –topic test

启动生产者命令行模式:

sh kafka-console-producer.sh –broker-list 192.168.1.134:6667 –topic test

启动消费者命令行模式:

sh kafka-console-consumer.sh –bootstrap-server 192.168.1.134:6667 –topic test –from-beginning

注意:本文归作者所有,未经作者允许,不得转载
kylin 安装相关资料部分资料来自网络,侵权毕设源码联系删除

区块链毕设网(www.qklbishe.com)全网最靠谱的原创区块链毕设代做网站
部分资料来自网络,侵权联系删除!
资源收费仅为搬运整理打赏费用,用户自愿支付 !
qklbishe.com区块链毕设代做网专注|以太坊fabric-计算机|java|毕业设计|代做平台 » kylin 安装相关资料

提供最优质的资源集合

立即查看 了解详情