长时间不用真的会忘。这个例子一共浪费了5小时。记不得太多细节了。所以说还是要坚持记录! 加油!!!
Hadoop集群与Clickhouse集群不能直接访问。
涉及知识点:
1、Hadoop数据导出。命令行与代码两种。
2、命令行方式涉及hadoop节点内使用还有hadoop-client访问hadoop集群使用命令行。
3、Java MR编写,将格式转换为TSV格式,并且根据需要清洗数据。
4、Hadoop数据导出后,数据导入Clickhouse.
5、Hadoop携带指定用户访问。
晚上逐一整理。