AIHGF 发布的文章

AIHGF

Docker - 定期备份运行的 mysql、mongo、redis等数据

服务器采用 Docker 方式运行服务，省去了还跟多环境配置的问题. 为了数据持久化，在宿主机上跑定时备份任务, 如Shell. 忘记是哪里记录的，这里备...

2021 年 04 月 19 日

Pytorch - 数据加载内存占用计算

PyTorch 在模型训练时，使用 DataLoader 来生成训练数据. 其支持并行执行，以加快模型训...

2021 年 04 月 19 日

Python - 忽略输出warning信息

运行代码时会有很多warning输出，比如版本更新等.如果需要忽略这些输出信息有两种方式：[1] - Python 代码里：import warnings...

2021 年 04 月 18 日

Python - 多进程multiprocessing库

multiprocessing 使用子进程代替线程，有效避免 GIL, Global Interpret...

2021 年 04 月 18 日

Docker - docker volume 数据卷及使用

Docker 镜像使用时，为了能够将数据持久化(即数据不随着Container的结束而结束，数据存在宿主机中)，需要将数据挂载到容器中.1. Docker...

2021 年 04 月 18 日

Ubuntu - 挂载内存做硬盘

如果内存足够大，在模型训练、数据处理时，可以将数据放进内存里，以降低 IO 延迟.挂载示例：sudo m...

2021 年 04 月 17 日

Ubuntu - 查看磁盘IO情况

安装:sudo apt install sysstat sudo apt install iotop参考：centos 7 查看磁盘io ，找出占用io读...

2021 年 04 月 16 日

技术架构

2021 年 04 月 15 日

Github 项目 - Deep_Metric源码学习梳理

Github - bnu-wangxun/Deep_MetricDeep Metric Learning in PyTorchLearn deep met...

2021 年 04 月 13 日

Python - scalene CPU和GPU及内存分析工具

论文：Scalene: Scripting-Language Aware Profiling for P...

2021 年 04 月 12 日