Articles in the category of 机器学习

  1. Home
  2. 机器学习

PyTorch DistributedDataParallel 单机多卡训练 踩坑记录

最近很荣幸加入了旷视成都研究院参与实习工作，在开始正式工作前的首要任务自然是将用好、用活旷视自建的Brain++计算平台。Brain++的设计很巧妙，也让我这个没出本科校门的fw体会到了多卡训练的爽点。之前在本校接触过3卡2080ti的多卡训练，当时用的开源代码，没有意识到自己动手写torch单机多卡训练代码时有这么多坑，下面一一列举一哈：报错：Default process group h...

  • MrXiao
  • April 4, 2021
  • No comments
    •

    Hyper-Table-OCR项目手记：如何建立一条成熟可用的表格OCR流水线？

    表格OCR任务，隶属于Document Analysis and Recognition领域，相关顶会有ICDAR。本文主要记录在Github上开源的个人...

  • MrXiao
  • February 28, 2021
  • No comments
    •

    Genetic Programming初探：初步了解 & 在图像分类上的应用

    通用资料收集DEAP：A novel evolutionary computation framework，有基于前缀树的遗传规划的工具；A FIELD GUIDE TO GENETIC PROGRAMMING：介绍GP的入门书籍（主要讲解tree-based）；Cartesian genetic programming：基于图的GP的PowerPoint讲解；Genetic Program...

  • MrXiao
  • January 23, 2021
  • No comments
    •

    MMDetection v1.x 升级至 v2.x：模型与配置文件升级的踩坑记录

    在不少热门的深度学习应用子领域中，开源工作者们往往会为研究者们提供通用的pipeline与抽象化工具，这能让研究者们更关注与模型的效果（雾...更高效地调...

  • MrXiao
  • December 9, 2020
  • 8 comments
    •

    从Tensorflow Slim到PyTorch：两大深度学习框架中不常用API对比（更新中）

    准备工作import torch import tensorflow as tf import torch.nn.functional as FConv2D padding=SAMETensorflow中可以指定padding方式为SAME，此时padding将自动设置为使得feature_map经过卷积后尺寸为$ \frac{n_{input}}{stride} $ ；network = ...

  • MrXiao
  • August 10, 2020
  • No comments