8.20会议记录

当前情况

kylo

• 处在与CDH结合的第二阶段

• 组件概况

  kylo、nifi、es、mq、hive、hdfs、spark

  kylo用nginx nifi、es配置文件集群 mq初步计划不集群（还需了解） hive、hdfs已集群 spark问题所在，待解决***

HDF

• 由于之前安装的3.0.x版本，后为与HDP版本相匹配需升级3.1.x版本，但升级中出现冲突

后续计划

kylo

• 1.在官网查找所有关于spark配置的章节做深入理解分析 2.学习spark相关资料，了解spark提交任务及运行机制

HDF

• 查找HDF卸载及升级文档，看能否先行删除旧版本再纯净升级新版本

～以上暂定以周三为节点，明天视情况加班