Articles in the category of 深度学习

  1. Home
  2. 深度学习

理解Python内建对象共享内存的Copy-On-Write: 记一次排查PyTorch DataLoader内存泄漏问题的经过

使用PyTorch炼丹的过程中，我们最怕的就是在DataLoader里debug，原因无他：多进程驱动的DataLoader很难给出清晰的traceback报错，即便将num_worker设为0不启用多进程，有时一个DataLoader Worker PID XXX is killed by signal: Killed或者Segmentation Fault还是能让用户一脸懵逼。新手炼丹师...

  • MrXiao
  • November 18, 2021
  • No comments
    •

    PyTorch DistributedDataParallel 单机多卡训练 踩坑记录

    最近很荣幸加入了旷视成都研究院参与实习工作，在开始正式工作前的首要任务自然是将用好、用活旷视自建的Brain++计算平台。Brain++的设计很巧妙，也让...

  • MrXiao
  • April 4, 2021
  • No comments
    •

    Hyper-Table-OCR项目手记：如何建立一条成熟可用的表格OCR流水线？

    表格OCR任务，隶属于Document Analysis and Recognition领域，相关顶会有ICDAR。本文主要记录在Github上开源的个人项目Hyper-Table-OCR的整个开发历程，如标题所说，Hyper-Table-OCR的创新点主要在为有表格线的表格OCR识别与重建提供了流水线，我们将全过程分为：预处理，包括四点透视变换（可选）与表格角度调整（可选）；表格检测（可选...

  • MrXiao
  • February 28, 2021
  • 5 comments
    •

    MMDetection v1.x 升级至 v2.x：模型与配置文件升级的踩坑记录

    在不少热门的深度学习应用子领域中，开源工作者们往往会为研究者们提供通用的pipeline与抽象化工具，这能让研究者们更关注与模型的效果（雾...更高效地调...

  • MrXiao
  • December 9, 2020
  • 12 comments
    •

    从Tensorflow Slim到PyTorch：两大深度学习框架中不常用API对比（更新中）

    准备工作import torch import tensorflow as tf import torch.nn.functional as FConv2D padding=SAMETensorflow中可以指定padding方式为SAME，此时padding将自动设置为使得feature_map经过卷积后尺寸为$ \frac{n_{input}}{stride} $ ；network = ...

  • MrXiao
  • August 10, 2020
  • No comments