运维

上篇介绍了《PowerShell统计Windows的文件夹大小 》，根据统计结果，我发现总共有几个文件占用比较夸张，具体如下所示： 从上面的统计可以看到，NVIDIA占用真的多啊，此时需要寄出老祖经典名场面 大概看了下，Notion是因为里...

原因 今天给一台VPS重新安装系统，选择了最新的Debian13.2。在我安装Docker的过程中，出现了如下问题： 可以看到是containerd.io_2.2.1-1~debian.13~trixie_amd64.deb这个包没找到。然...

最近看了下MySQL的error.log日志文件，发现只要链接数据库就会出现如下日志： 看来需要将认证插件替换为caching_sha2_password。本次更新步骤如下： 1、更新客户端认证插件 使用root用户登录到mysql后，先确...

接上一篇《在Windows11上使用WSL安装Hadoop伪分布式》本篇记录下安装Hive的过程。 一、环境 二、 下载Hive 三、部署Hive 1. 解压 创建一个hive的文件夹 2. 配置环境变量 修改为如下内容： 使环境变量生效 ...

最近调试程序，由于各种原因把，不允许开发机器连接Hadoop集群，只能在本机部署了，我使用了Docker和WSL（适用于Linux的Windows子系统）两种方法，经过对比，最终决定用WSL，Docker还不算稳定，动不动就闪退了。 一、环...

今天遇到一个小问题，在安装Python以来的时候，总是提示zsh: pip killed得错误，导致无法正常安装依赖，经过一番搜索发现是内存不足导致的，默认WSL2只有2GB内存，而我经常需要在WSL2中运行一些计算，所以就需要将其设置大一...

使用SSH方式登录Linux操作系统的云服务器时，过一段时间就会自动断开连接。本篇操作介绍如何保持SSH会话持续连接不断开。 配置sshd 可通过修改sshd配置文件来解决自动断开的问题，编辑/etc/ssh/sshd_config文件设置...

1. 前言 通常我一直在虚拟机中安装Hadoop、Hive、Hbase等大数据相关的组件，但随着我的笔记本使用年限越爱越长，性能也下降的很快，已经达到开虚拟机就会开的地步，于是我就考虑直接将Hadoop安装到macOS上，避免了虚拟机对资源...

1. 场景 CDH6.3.4集群，开通了Kerberos认证，在客户端得机器上已经通过了Kerberos得认证并且缓存了票据。 由于是新装的系统，安装了最新的jdk-8u371。 2. 报错 执行hdfs dfs -ls / 命令频繁的打印...

1. 背景 最近服务器升级了CentOS7.9，在重新部署服务后，运行模型训练，提示了如下错误： 2. 解决办法 将系统自带的libsasl2.so.3.0.0 软链到 libsasl2.so.2 再次执行python程序就不会出现这个错误...