服务器交换区占用量查看

9个月前 (11-20)851
服务器交换区占用量查看
前段时间公司服务器清洗数据接口调用特别慢,看了下是因为交换分区快满了,在网上查了下如何查看占用高的进程,杀掉后才好点。记录一下。 一、查看总体占用大小 1、可以通过swapon命令查看 swapon -s 2、可以通过free命令查看 free -h 二、查看排名前十的占用进...

nginx配置代码汇总

9个月前 (11-19)789
nginx配置代码汇总
1、配置80端口域名代理 server { listen 80; server_name *******.com; # rewrite ^(.*)$ https://$host$1; location / { proxy_redirect off; proxy...

window系统annaconda中同时安装paddle和pytorch环境

10个月前 (11-18)893
window系统annaconda中同时安装paddle和pytorch环境
一、下载nvidia驱动 https://www.nvidia.com/en-us/drivers/ 查看GPU信息 nvidia-smi   二、安装cuda https://developer.nvidia.com/cuda-11-8-0-download-arch...

docker常用命令汇总

10个月前 (11-06)814
docker常用命令汇总
1、进入到已安装的docker环境 docker exec -it b8f7bd09a12f /bin/bash 2、查看docker版本和其他信息 docker --version # 查看 Docker 版本 docker info # 查看 Docker 系统信息 3...

seatunnel各类型数据库同步配置

11个月前 (09-25)945
seatunnel各类型数据库同步配置
我是在dolphinscheduler调度器中使用seatunnel,在资源中心中创建对应的同步配置文件。 一、DB2同步数据到MySQL env { execution.parallelism = 2 job.mode = "BATCH" } source{ Jd...

python自动生成pg数据库表对应的es索引

12个月前 (09-13)804
项目需要用到Es进行查询。手动创建Es索引太麻烦,写了个脚本。 首先需要安装两个库 pip install psycopg2 我使用的es版本是7.10的安装对应版本的elasticsearch库 pip install elasticsearch==7 以下是生成索引代码 import...

python使用elasticsearch_dsl库聚合查询Es并进行分页

1年前 (2024-09-04)1027
python使用elasticsearch_dsl库聚合查询Es并进行分页
做大数据分析时用到Es,需要查询聚合后的每类数据量,聚合后的桶超过10000.搜索了半天,总结下。 1、首先导入所需的库 from elasticsearch_dsl import connections,Search,Q,A Q用作条件查询、A用作聚合 2、建立Es连接客户端 cli...

Ubuntu中conda虚拟环境安装kenlm步骤及报错整理

1年前 (2024-09-03)1456
Ubuntu中conda虚拟环境安装kenlm步骤及报错整理
使用pycorrector进行文本纠错的过程中,需要安装kenlm库。遇到了各种各样的问题。先进行汇总整理, 首先通过一般的pip安装会报错,不能通过命令安装。 因此需要上传源码进行安装。 源码下载连接 访问密码:PQdjD 上传到服务器后,放到conda或python能访问到的目录进...

如何在ubuntu服务器上持久化后台运行flask

1年前 (2024-08-27)931
如何在ubuntu服务器上持久化后台运行flask
flask自带的环境适合在开发时使用,在生产环境中不能持久化运行。 我这里使用的 gunicorn 库,搭建WSGI服务来运行flask程序。gunicorn是一个python WSGI http server,   一、安装gunicorn pip install gun...

linux安装anaconda并授权给所有用户使用

1年前 (2024-08-16)1103
linux安装anaconda并授权给所有用户使用
一、安装anaconda 1、下载anaconda 打开anaconda版本库 复制下载地址,在服务器目录下载 wget https://repo.anaconda.com/archive/Anaconda3-2024.06-1-Linux-x86_64.sh 2、修改安装文件权限...