kxh668的博客

原创 BOSS一键投递插件

然后，将下载的zip安装包拖拽带这个页面即可。界面中，出现这个就说明成功了。下载完之后，不要解压，打开。

原创 linux常见的命令行

echo "hello world">>a.txt 一个箭头覆盖文件中的内容，两个箭头追加内容。cp -r abc ab 将一个文件拷贝到另一个文件，也可以多个文件拷贝到一个文件。rm -f b.txt/a 强制删除一个文件或者文件夹，并且不提示。mv a.txt ccc 将一个文件移动到一个文件夹。mv a.txt aa.txt 对一个文件进行重命名。ls -a 查看当前路径下的包含隐藏文件的所有文件。ln -s a.txt（真实文件） a.soft。cat a.txt 查看某个文件的内容。

原创 No enum constant com.alibaba.datax.plugin.unstructuredstorage.reader.UnstructuredStorageReaderUtil

现总结datax与hive,mysql,oracle间的数据类型映射。datax从hive导数据到mysql时报错。datax中数据类型转化异常。把类型修改正确就可以导出！

原创 查看端口被占用情况

开启多个大数据组件，通常可能会用共用一个端口，导致服务启动不起来！在这个分享一下如何查看被占端口的情况。查看某个端口的使用情况。

原创 如何重置kafka

从0.9版本开始，consumer默认将offset保存在Kafka一个内置的topic中，该topic为__consumer_offsets 【topic 其实就是数据，就是位置 topic -log --segment- 一个个文件】删除每一个kafka logs 以及 datas，zk中的kafka 文件夹删除掉。Kafka0.9版本之前，consumer默认将offset 保存在。然后重新启动kafka就行了。

原创 解决sparksql创建出来的数据库路径错误的问题

首先启动 sparksql 的远程服务：start-thriftserver 服务。将hive-site.xml 复制到 spark的conf 下。解决方案：在hive 下修改hive-site.xml。使用datagrip 重新连接一下，记得刷新一下连接。修改spark下的hive-site.xml。

原创 退出python的base环境

如果使用finalshell进行连接时，重新连接，base就直接退出了。

原创 大数据之数仓金融项目总结

统计指标：最低借款金额，最高借款金额，申请次数，提供薪资报告次数，提供薪资报告最早时间，提供薪资报告资产最晚时间，提供信用报告次数，提供信用报告最早时间，提供信用报告最晚时间。统计指标：提款申请量，提款申请人数，提款通过量，提款通过人数，协议签订量，协议签订人数，申请提款金额，协议签订金额，实际提款金额。统计指标：还款合同量，还款人数，还款金额，预期本金，预期利息，预期服务费，预期天数，预期次数，预期状态。分析维度：提款日期，产品，证件类型，性别，渠道，用户类型，客户经理，借款期限。

原创 帆软FCA-FineBI考试题库

原创 假如虚拟机磁盘突然剩几十K

假如一个文件正在被使用，你删除之后也是不会释放存储空间的。需要关闭响应的服务才能释放。第一步：查看哪些文件大于100M。第二步：删掉无用的日志文件。

原创 Finalshell远程连接不显示文件夹列表

成功连接虚拟机，但finalshell不显示文件目录及内容。3.关闭窗口重新打开。

原创 PostgreSQL与MySQL核心区别分析

一个免费开源的关系型数据库管理系统 (RDBMS)，以 功能强大、扩展性强、可靠性高 著称，被广泛应用于企业级应用、数据科学、地理信息系统（GIS）、高并发场景等，和 MySQL, SQL Server, Oracle 是同类。

原创 探索Hadoop核心三剑客：HDFS、Yarn与MapReduce的协同之道

尽管新兴计算框架层出不穷，Hadoop三剑客仍是大数据体系的根基。理解其设计哲学与实现原理，对于构建可靠的大数据平台至关重要。随着云原生趋势的发展，这些核心组件正在容器化、服务化方向持续进化，继续支撑着企业级数据应用的创新发展。技术选型建议：对于ETL类批处理任务首选MapReduce，实时计算考虑Spark，资源调度复杂场景优先YARN，超大规模存储建议结合对象存储优化成本。

原创 FinalShall自定义修改控制台背景（超级简单，保姆级教程！！！）

1.首先准备360压缩软件2.进入fianlshell安装目录，找到fianlshell.jar3.右键选择用360压缩打开4.然后选择resours文件夹5.再选择images文件夹6.选择需要需要替换的图片7.最后再finalshell中选择要使用的图片背景最后就完成啦！！！你学会了吗？d(`･∀･)b (≧◡≦)

原创 linux shell 编程三剑客之一： grep

在人工智能席卷IT领域的今天，grep依然保持着不可替代的地位。专注做好一件事，并通过管道与其他工具完美协作。当我们深入理解模式匹配的本质，就能在纷繁复杂的文本数据中，像一位老练的猎手般精准捕获目标信息。—— 而grep，正是帮你找到"it"的最短路径。

原创 如何在Linux创建垃圾回收机制

将指定的文件移动到trash（回收站）目录下trash() {mkdir -p ~/.trash # 确保回收站目录存在# 查看回收站中的文件# 找回回收站中的文件mkdir -p ~/.trash # 确保回收站目录存在dothenelseecho "文件 ~/.trash/$file 不存在，无法恢复。fidone# 清空回收站目录下的所有文件cls() {read -p "确定要清空回收站吗？thenecho "回收站已清空。elseecho "操作已取消。fi。

原创 在Linux上安装mysql8.0，并连接navicat

1.安装rpm -ivh rpm安装包的名字2.卸载rpm -e rpm的名字rpm -e rpm的名字 --nodeps (强制卸载)3.查询rpm -aq这个可以查询到所有的，使用rpm安装包安装过的软件的名字，如果想删除的话，直接使用这个名字删除即可。