<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[M_red的博客]]></title><description><![CDATA[]]></description><link>https://blog.csdn.net/M_red</link><language>zh-cn</language><generator>https://blog.csdn.net/</generator><copyright><![CDATA[Copyright &copy; M_red]]></copyright><item><title><![CDATA[Qwen3.8-Max 新手极速上手指南]]></title><link>https://blog.csdn.net/M_red/article/details/163471469</link><guid>https://blog.csdn.net/M_red/article/details/163471469</guid><author>M_red</author><pubDate>Tue, 04 Aug 2026 13:31:21 +0800</pubDate><description><![CDATA[本地部署大语言模型实战指南 随着量化技术和推理优化的发展，如今在消费级设备上运行高性能大语言模型已不再是难题。本文提供了一份从零开始的实战指南，涵盖模型选择、环境配置到业务落地的全流程。核心内容包括： 环境搭建：推荐使用Conda管理Python环境，并详细介绍了GPU/CPU不同配置下的依赖安装方法 代码调用：展示通过Python脚本加载GGUF量化模型的关键参数设置和生成控制技巧 性能优化：分享量化选择、批处理参数调优等实用技巧，平衡速度与显存占用 业务整合：以技术文档问答系统为例，演示本地模型在企业内]]></description><category></category></item><item><title><![CDATA[OpenLDAP 服务搭建与配置全流程指南]]></title><link>https://blog.csdn.net/M_red/article/details/150774978</link><guid>https://blog.csdn.net/M_red/article/details/150774978</guid><author>M_red</author><pubDate>Mon, 25 Aug 2025 17:21:30 +0800</pubDate><description><![CDATA[OpenLDAP 服务搭建与配置指南 本文详细介绍了OpenLDAP服务的完整部署流程，包括以下关键步骤： 服务端安装：通过yum安装核心组件，配置日志、数据库，设置管理员密码并启动服务。 目录结构配置：导入基础Schema，配置根域和管理员信息，使用migrationtools工具生成基础目录结构。 用户管理：演示如何通过LDIF文件添加用户和用户组，包括testuser和hive用户示例。 常见操作：提供查询用户/组信息和删除用户等实用命令。 该方案特别适用于需要集中式用户身份管理的多节点集群环境，通过]]></description><category></category></item><item><title><![CDATA[OpenLdap中TLS协议配置]]></title><link>https://blog.csdn.net/M_red/article/details/150774335</link><guid>https://blog.csdn.net/M_red/article/details/150774335</guid><author>M_red</author><pubDate>Mon, 25 Aug 2025 17:10:28 +0800</pubDate><description><![CDATA[摘要：本文详细介绍了在OpenLDAP中配置TLS协议的全过程，包括证书生成、服务端配置和客户端配置三个关键步骤。首先通过openssl工具生成CA根证书和服务器证书，重点说明证书路径设置和权限调整；然后配置slapd服务启用TLS，修改相关配置文件并验证配置；最后指导客户端部署CA证书，配置sssd服务使用加密连接。全文提供完整的命令行操作和参数说明，特别强调证书权限管理、配置验证和636端口检查等关键要点，适用于企业内网环境下的LDAP安全加固。（150字）]]></description><category></category></item><item><title><![CDATA[CDP集群中通过Hive外部表迁移HBase数据的操作记录]]></title><link>https://blog.csdn.net/M_red/article/details/149970901</link><guid>https://blog.csdn.net/M_red/article/details/149970901</guid><author>M_red</author><pubDate>Wed, 06 Aug 2025 19:00:00 +0800</pubDate><description><![CDATA[本文验证了在CDP集群中通过Hive外部表映射HBase表实现数据查询与迁移的可行性。测试流程包括：创建HBase测试表并插入数据，建立Hive外部表进行映射，验证数据一致性，以及通过Hive SQL将数据迁移至HDFS。结果表明该方法能实现实时数据同步和准确迁移，同时提出了权限配置、列映射规则、性能优化等注意事项。整个过程证明了Hive与HBase集成的有效性，为大数据环境下跨组件数据操作提供了可行方案。]]></description><category></category></item><item><title><![CDATA[JVM 垃圾回收器分类及其特点详解]]></title><link>https://blog.csdn.net/M_red/article/details/146320169</link><guid>https://blog.csdn.net/M_red/article/details/146320169</guid><author>M_red</author><pubDate>Mon, 17 Mar 2025 17:08:35 +0800</pubDate><description><![CDATA[下的不同垃圾回收器（Garbage Collectors），每种回收器针对不同场景设计。JVM 的垃圾回收（Garbage Collection, GC）主要分为。选择合适的垃圾回收器需结合。JVM 堆内存通常分为。]]></description><category></category></item><item><title><![CDATA[CDH交换分区告警处理]]></title><link>https://blog.csdn.net/M_red/article/details/143759885</link><guid>https://blog.csdn.net/M_red/article/details/143759885</guid><author>M_red</author><pubDate>Thu, 14 Nov 2024 11:49:38 +0800</pubDate><description><![CDATA[Linux交换分区的作用是在系统内存不足时，充当额外的虚拟内存空间，以满足系统对内存的需求。当系统内存不足时，操作系统将一部分内存中的数据转移到交换分区中，以释放内存空间供其他程序使用。交换分区可以减少系统因内存不足而导致的性能问题，同时还可以提供一种冗余的备份机制，确保系统在内存不足时能够继续正常运行。交换分区的大小一般设置为系统内存大小的1.5倍到2倍之间。]]></description><category></category></item><item><title><![CDATA[cdp集群主节点根目录磁盘扩容]]></title><link>https://blog.csdn.net/M_red/article/details/138122197</link><guid>https://blog.csdn.net/M_red/article/details/138122197</guid><author>M_red</author><pubDate>Tue, 23 Apr 2024 18:00:00 +0800</pubDate><description><![CDATA[挂载磁盘名字为vda，磁盘容量有80G，现在磁盘使用量为vda下面三个分区vda1，vda2，vda3容量之和，也就是说vda这块磁盘还有大约40G的容量未使用，现在增加一个分区，在把根目录挂上去就可以实现对根目录扩容了。Error: 备份 GPT 表不像应该的那样出现在磁盘的末尾。是逻辑卷的路径,关联的 XFS 文件系统扩展到逻辑卷的整个大小.是逻辑卷的路径,关联的 XFS 文件系统扩展到逻辑卷的整个大小.可以看到，根目录容量只有37G，现在对根目录进行扩容。，并将其大小增加了100% 的可用空间。]]></description><category></category></item><item><title><![CDATA[Apache Spark 的基本概念和在大数据分析中的应用]]></title><link>https://blog.csdn.net/M_red/article/details/137975569</link><guid>https://blog.csdn.net/M_red/article/details/137975569</guid><author>M_red</author><pubDate>Fri, 19 Apr 2024 19:40:27 +0800</pubDate><description><![CDATA[凭借其高速和可扩展的计算能力，Spark 可以处理包括数据清洗、数据预处理、数据仓库和数据实时分析等多种任务。（Resilient Distributed Datasets，简称 RDD）：RDD 是 Spark 的核心抽象，它是一个可分区、可并行处理的容错数据集。Spark Streaming 支持从多种数据源实时获取数据，并提供了类似于 RDD 的抽象，使开发者可以对数据进行流处理和实时分析。它被设计为一个高速、通用、可扩展的数据处理引擎，可以用于处理大规模、复杂的数据集。]]></description><category></category></item><item><title><![CDATA[cdp集群Hbase组件HRegionServer服务停止原因以及排查]]></title><link>https://blog.csdn.net/M_red/article/details/137918341</link><guid>https://blog.csdn.net/M_red/article/details/137918341</guid><author>M_red</author><pubDate>Fri, 19 Apr 2024 17:47:18 +0800</pubDate><description><![CDATA[前言：重启集群后某一节点HRegionServer服务停止，重启前所有服务均正常。去查看对应节点后台，发现ntp服务正常启动，但是没有与主节点进行时间同步。怀疑是主节点ntp服务没启起来，去主节点查看ntp是active状态，]]></description><category></category></item><item><title><![CDATA[Impala Daemon无法启动问题记录（UNIX 域套接字路径不存在）]]></title><link>https://blog.csdn.net/M_red/article/details/137885132</link><guid>https://blog.csdn.net/M_red/article/details/137885132</guid><author>M_red</author><pubDate>Wed, 17 Apr 2024 19:16:52 +0800</pubDate><description><![CDATA[上午11点19:08.002分	ERROR	cc:291	Aborting Impala Server startup due to improper configuration. Impalad exiting.错误信息提到了 dfs.domain.socket.path 的父目录不可读或不可执行。前言：集群扩节点，新加节点的Impala Daemon起不起来了。去hdfs配置里查找dfs.domain.socket.path。去后台，找没有启动的Impala Daemon节点，创建这个目录。]]></description><category></category></item><item><title><![CDATA[zookeeper中的znode节点的一些功能和应用]]></title><link>https://blog.csdn.net/M_red/article/details/137013003</link><guid>https://blog.csdn.net/M_red/article/details/137013003</guid><author>M_red</author><pubDate>Sun, 07 Apr 2024 11:54:51 +0800</pubDate><description><![CDATA[在配置 Hive 的高可用性（High Availability，HA）环境时，ZooKeeper 可以用于管理和协调 Hive 的主从节点，确保 Hive 元数据服务的可用性和一致性。ZooKeeper 是 HBase 集群的协调服务，它存储了 HBase 集群的状态信息、表结构信息、RegionServer 的信息。zookeeper的结构为树状结构，其每个树状节点中存储着其他组件的元数据。有着独特的选举机制，一般在中小型集群中，zookeeper一般装在。]]></description><category></category></item><item><title><![CDATA[Impala Daemon无法启动问题记录（25000端口被占用）]]></title><link>https://blog.csdn.net/M_red/article/details/137452956</link><guid>https://blog.csdn.net/M_red/article/details/137452956</guid><author>M_red</author><pubDate>Sun, 07 Apr 2024 10:06:06 +0800</pubDate><description><![CDATA[前言：集群主节点根目录内存快爆了，开始清理主节点内存重启组件，发现Kerberos认证的角色用户都过期了，又重新生成了一下角色，在启动impala组件过程中，其中一个Impala Daemon组件启动失败。]]></description><category></category></item><item><title><![CDATA[该主机与 Cloudera Manager Server 失去联系的时间过长。 该主机未与 Host Monitor 建立联系]]></title><link>https://blog.csdn.net/M_red/article/details/137269288</link><guid>https://blog.csdn.net/M_red/article/details/137269288</guid><author>M_red</author><pubDate>Thu, 04 Apr 2024 10:46:33 +0800</pubDate><description><![CDATA[该主机与 Cloudera Manager Server 失去联系的时间过长。该主机未与 Host Monitor 建立联系这个去集群主机cm界面上看会出现这个错误。可能和集群时间不同步有关，也有可能和agent服务有关。]]></description><category></category></item><item><title><![CDATA[cdp集群扩容节点磁盘挂载失败原因和解决办法]]></title><link>https://blog.csdn.net/M_red/article/details/137219326</link><guid>https://blog.csdn.net/M_red/article/details/137219326</guid><author>M_red</author><pubDate>Thu, 04 Apr 2024 10:05:21 +0800</pubDate><description><![CDATA[可以看到本该挂载到/data5目录的磁盘sdf1被挂到了/data1上面。磁盘重新卸载下去后，重新去 /etc/fstab文件配置一下。所以现在需要把/disk1目录下挂载的所有磁盘卸载下去。结果挂载的五块磁盘全部挂载在/disk1 目录当中。发现之前在设置挂载点的时候挂载目录忘记更改了。在最后一步挂载时，发现有块磁盘没挂载上去。之前按照文档挂载磁盘。属于磁盘挂载重复错误。]]></description><category></category></item><item><title><![CDATA[CDH集群hive初始化元数据库失败]]></title><link>https://blog.csdn.net/M_red/article/details/137085378</link><guid>https://blog.csdn.net/M_red/article/details/137085378</guid><author>M_red</author><pubDate>Thu, 28 Mar 2024 17:00:11 +0800</pubDate><description><![CDATA[链接的数据库和用户用的和刚开始初始化cm用的数据库用户是同一个，初始化失败。单独搞一个数据库用户给hive。链接的数据库和用户没给管理员权限。给用户DBA的权限。]]></description><category></category></item><item><title><![CDATA[cdp集群yarn组件ResourceManager无法启动问题记录]]></title><link>https://blog.csdn.net/M_red/article/details/136866271</link><guid>https://blog.csdn.net/M_red/article/details/136866271</guid><author>M_red</author><pubDate>Wed, 20 Mar 2024 11:09:56 +0800</pubDate><description><![CDATA[ResourceManager 在启动过程中遇到了 Zookeeper 认证权限的问题。具体来说，出现了 “NoAuthException: KeeperErrorCode = NoAuth for /rmstore/ZKRMStateRoot”。前言：cdp集群装了Kerberos认证，在进行权限集成时集群所有组件高可用状态失效，yarn组件ResourceManager停止。我又去zk上面看看打算把znode节点删除试试，结果又出幺蛾子了。zookeeper要我权限认证，现在连最基本的ls都看不了了。]]></description><category></category></item><item><title><![CDATA[cdp集群中hive插入语句任务执行报错]]></title><link>https://blog.csdn.net/M_red/article/details/136833543</link><guid>https://blog.csdn.net/M_red/article/details/136833543</guid><author>M_red</author><pubDate>Tue, 19 Mar 2024 10:14:37 +0800</pubDate><description><![CDATA[编译语句时出错：失败：执行错误，从org.apache.hadoop.hive.ql.exec.tez返回代码2。Vertex的任务资源超出了集群容器的能力，Vertex=Vertex_1710760432_005_1_00[映射1]，请求的任务资源=＜memory:4096，vCores:1＞，集群最大容器容量=＜memory:3348，vCore:4＞最近新搭建了一套cdp测试集群，在hue界面测试hive语句时，建表正常，但是出现插入数据失败问题。修改后，重启集群使配置生效。]]></description><category></category></item><item><title><![CDATA[CDH集群离线搭建(适用内网)——cdh集成ldap⑭]]></title><link>https://blog.csdn.net/M_red/article/details/136685387</link><guid>https://blog.csdn.net/M_red/article/details/136685387</guid><author>M_red</author><pubDate>Sat, 16 Mar 2024 13:00:00 +0800</pubDate><description><![CDATA[此部分为在cm界面上进行操作的步骤，关于ldap安装的部分可直接参考之前的文章。]]></description><category></category></item><item><title><![CDATA[CDH集群离线搭建(适用内网)——OpenLdap与SSH集成⑬]]></title><link>https://blog.csdn.net/M_red/article/details/136684935</link><guid>https://blog.csdn.net/M_red/article/details/136684935</guid><author>M_red</author><pubDate>Sat, 16 Mar 2024 09:00:00 +0800</pubDate><description><![CDATA[【代码】CDH集群离线搭建(适用内网)——OpenLdap与SSH集成]]></description><category></category></item><item><title><![CDATA[CDH集群离线搭建(适用内网)——sssd安装和配置⑫]]></title><link>https://blog.csdn.net/M_red/article/details/136650644</link><guid>https://blog.csdn.net/M_red/article/details/136650644</guid><author>M_red</author><pubDate>Fri, 15 Mar 2024 13:00:00 +0800</pubDate><description><![CDATA[修改/etc/sssd/sssd.conf文件，在执行authconfig命令时会默认生成，如果文件不存在则新建。下面这几个文件配置都会更改，做完上面的步骤自己可以排查一下。执行如下命令配置并启用sssd服务。修改sssd.conf文件权限。启动相关服务并加入系统自启动。]]></description><category></category></item></channel></rss>