安装python torch、transformer、记录

这篇具有很好参考价值的文章主要介绍了安装python torch、transformer、记录。希望对大家有所帮助。如果存在错误或未考虑完全的地方,请大家不吝赐教,您也可以点击"举报违法"按钮提交疑问。

由于安装总是出现各种奇怪问题,现总结帮助以后环境搭建

anaconda promt 命令框

国内常用镜像源

  • 清华大学 :https://pypi.tuna.tsinghua.edu.cn/simple/
  • 阿里云:http://mirrors.aliyun.com/pypi/simple/
  • 中国科学技术大学 :http://pypi.mirrors.ustc.edu.cn/simple/
  • 华中科技大学:http://pypi.hustunique.com/
  • 豆瓣源:http://pypi.douban.com/simple/
  • 腾讯源:http://mirrors.cloud.tencent.com/pypi/simple
  • 华为镜像源:https://repo.huaweicloud.com/repository/pypi/simple/

在base中创建需要的环境:

  • 创建需要的环境,并指定需要的版本
    1. 查看环境目录:conda env list
    2. 创建环境,并指定python版本:conda create --name peculiar python=3.6.9
    3. 激活环境,conda activate peculiar
    4. 查看pip版本:pip show pip 或者 conda list
      最好更新下pip版本,避免出现问题: pip install --upgrade pip
    5. 安装pytorch: 参考链接
      个人觉得下载文件后安装也可以,而且不容易出错
    6. 安装transformers
      如果使用 pip install transformers 安装出现问题,如:
        ERROR: Failed building wheel for tokenizers
      Failed to build tokenizers
      ERROR: Could not build wheels for tokenizers, which is required to install pyproject.toml-based projects
      
      解决方法:指定transformers版本
      一般用transformers版本3.4.0
      报错:HuggingFace 报错 ImportError: cannot import name ‘HfApi‘
      命令行:
      conda install -c huggingface transformers # 对于python 3.9.13版本
      pip install -i https://pypi.tuna.tsinghua.edu.cn/simple/ transformers==3.4.0  #可能出错
      
      测试transformers安装是否成功: python
      	from transformers import pipeline
      	print(pipeline('sentiment-analysis')('we love you'))
      	# 会有一个下载操作
      
  • tree-sitter安装
    • 直接安装使用: pip install tree_sitter -i http://mirrors.aliyun.com/pypi/simple/ --trusted-host mirrors.aliyun.com
      出现超时情况试试加镜像,如果还不可以看看是不是下面的问题
      ERROR: Could not find a version that satisfies the requirement tree_sitter (from versions: none)
      链接
  • sklearn安装
    sklearn安装需要需要先安装
    • Numpy

    • Scipy

    • matpolotlib文章来源地址https://www.toymoban.com/news/detail-535725.html

      接着安装sklearn,这里需要注意的是在Anaconda中sklearn叫做scikit-learn,并且在安装scikit-learn前还需要安装其他一些依赖,并且最好是按顺序下载
      conda install numpy
      conda install pandas
      conda install scipy
      conda install matplotlib
      conda install scikit-learn==0.20.0
      

到了这里,关于安装python torch、transformer、记录的文章就介绍完了。如果您还想了解更多内容,请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章,希望大家以后多多支持TOY模板网!

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处: 如若内容造成侵权/违法违规/事实不符,请点击违法举报进行投诉反馈,一经查实,立即删除!

领支付宝红包 赞助服务器费用

相关文章

  • 深度学习 | 基于 CPU 的 tensorflow + keras + python 版本对照及环境安装

    Hi,大家好,我是源于花海。 要让一个基于 CPU 的 tensorflow 和 keras 开发的深度学习模型正确运行起来,配置环境是个重要的问题,本文介绍了 tensorflow 和 keras 和对应的 python 版本以及安装环境的部分流程。 目录 一、tensorflow + keras + python 版本对照 二、tensorflow 和 keras 安装流

    2024年01月25日
    浏览(47)
  • 深度学习—Python、Cuda、Cudnn、Torch环境配置搭建

    近期由于毕设需要使用Yolo,于是经过两天捣腾,加上看了CSDN上各位大佬的经验帖后,成功搭建好了GPU环境,并能成功使用。因而在此写下这次搭建的历程。 万事开头难,搭建环境很费时间,如果一开始版本不对应,到后面就要改来改去,很麻烦。首先要注意以下事项: 1.

    2024年02月11日
    浏览(211)
  • python cuda torch验证是否成功安装,版本是否匹配

    根据nvcc-smi查到自己的显卡型号,如下图所示。 本人的电脑显卡型号为:GeForce GT 730 可以通过以下链接查找 http://www.5ityx.com/cate100/155907.html 可以看到我的显卡算力是3.5 备注:你的显卡计算力必须保证在3.5以上。如果是3.5及以下,请下载pytorch 1.1,或1.2的版本。这是因为需要硬

    2024年02月15日
    浏览(48)
  • python深度学习【transforms所有用法介绍】

    裁剪——Crop 中心裁剪:transforms.CenterCrop 随机裁剪:transforms.RandomCrop 随机长宽比裁剪:transforms.RandomResizedCrop 上下左右中心裁剪:transforms.FiveCrop 上下左右中心裁剪后翻转,transforms.TenCrop 翻转和旋转——Flip and Rotation 依概率p水平翻转:transforms.RandomHorizontalFlip(p=0.5) 依概率p垂

    2024年02月03日
    浏览(48)
  • 关于transformer 学习、torch_geometric

    1、 nn.TransformerEncoder nn.TransformerEncoder 是 PyTorch 中的一个模块,用于构建 Transformer 模型中的编码器。Transformer 是一种强大的序列到序列模型,广泛应用于自然语言处理的各个领域。 在 nn.TransformerEncoder 中,我们可以定义多个 nn.TransformerEncoderLayer ,每个 nn.TransformerEncoderLayer 包含

    2023年04月16日
    浏览(35)
  • 2022-2023最新 pytorch安装方法 GPU版本 python3.9 torch-1.13.0+cu116-cp39 torchvision-0.14.0 亲自安装可用!(其他版本也通用)

    如图,这样是不能安装gpu版本的。 这里针对python3.9版本,在此网站https://github.com/pytorch/vision查找读者python版本对应的torch和torchvision。 然后在这个网址https://download.pytorch.org/whl/torch/ 和 https://download.pytorch.org/whl/torchvision/里下载,我这里是对应了这两个。千万要对应,不然会报

    2024年02月06日
    浏览(54)
  • Python使用pytorch深度学习框架构造Transformer神经网络模型预测红酒分类例子

    经典的红酒分类数据集是指UCI机器学习库中的Wine数据集。该数据集包含178个样本,每个样本有13个特征,可以用于分类任务。 具体每个字段的含义如下: alcohol:酒精含量百分比 malic_acid:苹果酸含量(克/升) ash:灰分含量(克/升) alcalinity_of_ash:灰分碱度(以mEq/L为单位)

    2024年02月02日
    浏览(45)
  • 跟着李沐学AI(动手学深度学习 PyTorch版)学习笔记——03安装(环境配置d2l、pytorch)(python3.7版本+Windows+各种问题解决措施)

    1.下载Miniconda下载地址 2.在安装过程中需要勾选“Add Anaconda to the system PATH environment variable”选项 3.检验win+R,输入cmd,在文本框输入conda --version 1.点击该链接+点击jupyter记事本下载压缩包 2.解压该压缩包 3.在解压后的文件夹地址栏输入cmd回车进入命令模式。 1.conda和pip默认使⽤

    2024年02月12日
    浏览(57)
  • 学习如何使用GPT2进行文本生成(torch+transformers)

    GPT2是OPen AI发布的一个预训练语言模型,见论文《Language Models are Unsupervised Multitask Learners》,GPT-2利用单向Transformer的优势,做一些BERT使用的双向Transformer所做不到的事。那就是通过上文生成下文文本。 理论部分的文章有很多,这里不做深究,下面直接看代码吧 对给出的文本

    2024年02月12日
    浏览(40)
  • 【深度学习框架-torch】torch.norm函数详解用法

    torch版本 1.6 dim是matrix norm 如果 input 是 matrix norm ,也就是维度大于等于2维,则 P值默认为 fro , Frobenius norm 可认为是与计算向量的欧氏距离类似 有时候为了比较真实的矩阵和估计的矩阵值之间的误差 或者说比较真实矩阵和估计矩阵之间的相似性,我们可以采用 Frobenius 范数。

    2024年02月10日
    浏览(51)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包,优惠每天领

二维码1

领取红包

二维码2

领红包