window系统annaconda中同时安装paddle和pytorch环境
一、下载nvidia驱动 https://www.nvidia.com/en-us/drivers/ 查看GPU信息 nvidia-smi 二、安装cuda https://developer.nvidia.com/cuda-11-8-0-download-arch...
7个月前 (11-18)637
docker常用命令汇总
1、进入到已安装的docker环境 docker exec -it b8f7bd09a12f /bin/bash 2、查看docker版本和其他信息 docker --version # 查看 Docker 版本 docker info # 查看 Docker 系统信息 3...
7个月前 (11-06)576
seatunnel各类型数据库同步配置
我是在dolphinscheduler调度器中使用seatunnel,在资源中心中创建对应的同步配置文件。 一、DB2同步数据到MySQL env { execution.parallelism = 2 job.mode = "BATCH" } source{ Jd...
9个月前 (09-25)635
python自动生成pg数据库表对应的es索引
项目需要用到Es进行查询。手动创建Es索引太麻烦,写了个脚本。 首先需要安装两个库 pip install psycopg2 我使用的es版本是7.10的安装对应版本的elasticsearch库 pip install elasticsearch==7 以下是生成索引代码 import...
9个月前 (09-13)542
python使用elasticsearch_dsl库聚合查询Es并进行分页
做大数据分析时用到Es,需要查询聚合后的每类数据量,聚合后的桶超过10000.搜索了半天,总结下。 1、首先导入所需的库 from elasticsearch_dsl import connections,Search,Q,A Q用作条件查询、A用作聚合 2、建立Es连接客户端 cli...
9个月前 (09-04)703
Ubuntu中conda虚拟环境安装kenlm步骤及报错整理
使用pycorrector进行文本纠错的过程中,需要安装kenlm库。遇到了各种各样的问题。先进行汇总整理, 首先通过一般的pip安装会报错,不能通过命令安装。 因此需要上传源码进行安装。 源码下载连接 访问密码:PQdjD 上传到服务器后,放到conda或python能访问到的目录进...
9个月前 (09-03)1040
goproxy实现内网穿透
前提条件,有台公网ip的服务器,内网服务电脑可以访问外网。 goproxy文档 一、服务器安装ProxyAdmin git地址 1、下载后上传到服务器,解压 找到 releases 目前最新是5.0的版本,点击进去 找到和服务器匹配的包文件,点击下载 然后上传到服务器上进行解压...
10个月前 (09-01)767
如何在ubuntu服务器上持久化后台运行flask
flask自带的环境适合在开发时使用,在生产环境中不能持久化运行。 我这里使用的 gunicorn 库,搭建WSGI服务来运行flask程序。gunicorn是一个python WSGI http server, 一、安装gunicorn pip install gun...
10个月前 (08-27)615
linux安装anaconda并授权给所有用户使用
一、安装anaconda 1、下载anaconda 打开anaconda版本库 复制下载地址,在服务器目录下载 wget https://repo.anaconda.com/archive/Anaconda3-2024.06-1-Linux-x86_64.sh 2、修改安装文件权限...
10个月前 (08-16)690
按pg数据库表结构自动生成Es索引及映射
环境说明 我使用的pg是16.4版本,Es是7.10版本,python3.10 PostgreSQL 16.4, compiled by Visual C++ build 1940, 64-bit 1、安装psycopg2和elasticsearch库 pip install psycopg...
10个月前 (08-15)493