IP属地:北京
前言 公司需要输送给网安部一批数据集,共计1550w张图片,大约3,5T。 处理过程中同时参考网上的一些方法的实践总结。 1:快速大量小文件复制...
前言 1. 对环境的操作 1.1. 查看进程中的环境变量 1.2. Linux查看物理CPU个数、核数、逻辑CPU个数 **# 总核数 = 物理...
前言 记录一下Faiss在项目使用中的一些优化,对OMP_NUM_THREADS 环境变量参数的测试验证~ 结论: 测试结果统计: * CPU=...
前言 分享一些Mongdb常用的数据清洗方式 注:"Exceeded memory limit for $group, but didn't a...
前言 我们在pull国外基础镜像使用时,时区就成为一个不能规避的问题。国外时区通常都是UTC,需要改成国内时区CST. Ubuntu 基本镜像修...
前言 常规我们需要把业务日志转成JSON格式输入到ELK中。经常会碰到中文乱码的问题 解决方案 方案a: pythonjsonlogger [自...