搜索结果
查询Tags标签： pytorch，共有 396条记录-
pycharm-python库配置及搭建环境的问题
一 安装anaconda 1、创建环境 2、安装torch0.4.1的坑 github找的项目比较老，怎么装都不成功，网上的教程试了都没用 最后：conda install pytorch==0.4.1 安装成功！
2022/5/3 9:14:20 人评论 次浏览 -
pytorch错误：RuntimeError: received 0 items of ancdata解决
https://www.cnblogs.com/zhengbiqing/p/10478311.html https://blog.csdn.net/chen1234520nnn/article/details/103935825https://github.com/pytorch/pytorch/issues/973 1）修改多线程的tensor方式为file_system（默认方式为file_descriptor，受限于open files数量）：…
2022/4/25 6:12:46 人评论 次浏览 -
Ubuntu下安装PyTorch杂记
最近几天我一直常用的Kubuntu（KDE yes！）更新至22.04后居然出现无法更改软件源的bug，去Kubuntu论坛一看有同样问题的人还不在少数，但却没有好的解决办法，故而只有备份数据装回Ubuntu。 由于学习需要，我需要再装一遍Pytorch。Pytorch在linux上安装推荐使用conda，使用…
2022/4/24 7:13:21 人评论 次浏览 -
使用singularity制作python镜像在服务器上训练数据
创建python镜像 singularity build --sandbox pytorch docker://python:3.8创建一个名字叫做pytorch的镜像，python 版本选择3.8 交互模式运行 singularity shell -w pytorch通过shell进入交互模式，安装需要的python包 安装包 pip install -r requirements.txt -i https:…
2022/4/18 20:14:07 人评论 次浏览 -
数据科学随笔220412
这是我在学习和工作中所看到的，觉得有意思也很有用的内容的合集 快一年半没有说中文了，遣词造句难免有些生疏，但愿以后中文水平恢复了不要想打自己NIPS 2018 上 MPC solver，用于在强化学习模型中的控制辅助。 Specifically, we differentiate through MPC by using th…
2022/4/13 6:22:40 人评论 次浏览 -
【pytorch】读取RGB图片，并输入到简单的网络中进行处理
使用PIL读取RBG图片 from PIL import Image image=Image.open("./xxx.png") #读取图片 img_data = np.array(image) #将图片转换为np对象 （此时img_data的大小为 [H,W,3]，其中W为图片的宽，H为图片的高，3为RGB通道数）将三维的RGB图片增加一维成四维 …
2022/4/13 6:19:47 人评论 次浏览 -
pytorch 记录
torch.take() 把张量化为一个行向量，取其中的元素 广播机制中0维和1维的轴是可广播的 矩阵相乘 *和torch.mul()是对应位置相乘 @和torch.mm()是矩阵相乘 torch.bmm()相比mm增加了batch运算但不能广播 torch.matmul()相比bmm更是增加了广播，泛用性强 torch.full([3,3],1…
2022/4/12 23:44:58 人评论 次浏览 -
Pytorch.nn.conv2d 过程验证（单，多通道卷积过程）
来源 https://zhuanlan.zhihu.com/p/32190799 今天在看文档的时候，发现pytorch 的conv操作不是很明白，于是有了一下记录 首先提出两个问题：1.输入图片是单通道情况下的filters是如何操作的？ 即一通道卷积核卷积过程 2.输入图片是多通道情况下的filters是如何操作的？ …
2022/3/31 23:50:42 人评论 次浏览 -
Linux服务器中conda创建新环境并安装pytorch
1.下载Anaconda3-5.3.1-Linux-x86_64.sh并运行如下命令，按提示操作完成后退出、重进命令行。bash Anaconda3-5.3.1-Linux-x86_64.sh2.创建新环境，命令中的yourEnv指新创建的虚拟环境的名字，可自己命名。conda create --name yourEnv python=3.73.进入（或激活）所创建的…
2022/3/27 7:24:23 人评论 次浏览 -
BERT预训练tensorflow模型转换为pytorch模型
在Bert的预训练模型中，主流的模型都是以tensorflow的形势开源的。但是huggingface在Transformers中提供了一份可以转换的接口（convert_bert_original_tf_checkpoint_to_pytorch.py）。 但是如何在windows的IDE中执行呢？首先，需要安装transformers (可以挂国内清华、豆…
2022/3/20 23:27:55 人评论 次浏览 -
【Pytorch Lightning】基本特征
手动优化和自动优化 自动优化。使用lightning,你不需要担心何时启用/禁用梯度的计算，做反向传播，或者更新优化器等。只要你在training_step中返回一个带有loss的图，Lightning就会自动进行优化。 def training_step(self, batch, batch_idx):loss = self.encoder(batch)…
2022/3/3 6:19:32 人评论 次浏览 -
pytorch文本任务pipeline
文章目录 1. 读取文本数据制作成pytorch专用数据集2. 对句子进行分词得到词库3. 构建DataLoadarhttps://pytorch.org/tutorials/beginner/text_sentiment_ngrams_tutorial.htmlhttps://github.com/lankuohsing/pytorch-study/tree/main/utils/text_pipline1. 读取文本数据…
2022/3/2 23:46:46 人评论 次浏览 -
Ubuntu 20.04 系统下（子系统）深度学习环境配置 ( Pytorch + GPU )
Ubuntu 20.04 系统下（子系统）深度学习环境配置 ( Pytorch + GPU )
2022/3/2 7:15:10 人评论 次浏览 -
【Pytorch Lightning】Pytorch Lightning 初入
背景 看到这个，我相信你对Pytorch Lightning 有一定了解。虽然Pytorch已经很好了，但是在工程上，论文复现上等等，我们有时需要根据论文快速复现模型、有时有了好的idea想快速实现、有时工程上需要不断调优等等。这时我们就需要一个工具，能够快速使用他去实现模型，调优…
2022/3/1 6:24:50 人评论 次浏览 -
【技术文档】Ubuntu系统使用
Ubuntu跑算法心得记录 一、Ubuntu终端各种快捷命令1.1 终端美化1.2 信息传输1.2.1 与Windows互传信息二、Pytorch使用2.1 Pytorch安装2.1.1 安装途径2.1.2 安装BUG2.1.3 安装环境查看技巧 2.2 Conda内嵌Pip安装2.3 Pytorch技巧2.3.1 技巧函数2.3.2 功能函数三、其他各类包…
2022/2/28 7:22:45 人评论 次浏览
