首页
个人作品
AI&大数据
AI
大数据
编程语言
Java
Python
生活&随笔
瞬间
友链
计算机基础
算法编程
关于
分类
标签
文章归档
关于作者
开往下一站
小鱼吃猫博客
你所热爱的,便是你的生活。
累计撰写
115
篇文章
累计创建
47
个标签
累计收到
14
条评论
栏目
首页
个人作品
AI&大数据
AI
大数据
编程语言
Java
Python
生活&随笔
瞬间
友链
计算机基础
算法编程
关于
分类
标签
文章归档
关于作者
开往下一站
目 录
CONTENT
以下是
Python
相关的文章
基于BERT的命名实体识别
先配置一下模型路径 model_path="/data1/model/chinese-macbert-base" Step1 导入相关包 import evaluate from datasets import load_dataset from transformers import AutoT
2023-08-18
72
0
3
Python
NLP
Transformers框架实战——商品评价的情感分析实战
商品评价的情感分析实战 Transformers框架基础教程及更多实战内容 以商品评价数据集为例,使用bert进行情感分析。 数据集来源:https://github.com/SophonPlus/ChineseNlpCorpus Step1 导包 from transformers import
2023-08-07
94
0
4
NLP
Python
ValueError: too many dimensions 'str'
ValueError: too many dimensions 'str' 使用Bert进行训练时,报错如题。具体如下: ValueError: too many dimensions 'str' The above exception was the direct cause of the fo
2023-08-04
114
0
0
NLP
Python
Transformers框架之Trainer组件
Transformers框架之Trainer组件 Trainer参数解读 在学习完Tokenizer、Datasets、Model、Evaluate组件后,Trainer组件是用来训练模型的,也是最简 单的。以下是一个最基础的Trainer的参数示例: trainer = Trainer(
2023-08-04
63
1
1
Python
NLP
Transformers学习之Evaluate组件
Transformers学习之Evaluate组件 这是一个评估函数,在模型训练与测试中,我们会根据一些指标来对模型进行评测,用起来也非常简单哈。 # 导包 import evaluate 支持的评估函数 支持的评估函数较多,这里只列出几个常见的,其余可以使用 evaluate.list_eval
2023-08-03
47
0
1
NLP
Python
Transformers框架之Datasets 组件
用途:Datesets 顾名思义就是用来加载和保存数据集的组件 加载Huggingface数据集,选择数据集,如下图,你可以在对应位置选择你想要的数据集,选择任务和语言后,右边会出现对应的数据集。小鱼吃猫
2023-08-03
79
0
0
Python
NLP
Transformers框架之Model学习
在Transformers快速入门中介绍了pipeline()方法的使用。Model是Transformers中重要组件之一,主要负责加载和使用模型。接下来,以翻译任务为例子,使用huggingface中的现有模型进行翻译。 一、快速使用 # pileline中指定从英文翻译到中文(只针对多语言,这
2023-08-02
52
0
1
NLP
Python
Transformers框架之分词器(Tokenizer)学习
Transformers框架之分词器(Tokenizer)学习 一、基础用法 导包 from transformers import AutoTokenizer 加载Tokenizer 从Huggingface官网加载 # 从HuggingFace加载Tokenizer tokenizer =
2023-08-02
237
0
2
NLP
Python
root安装的conda,其他用户不可见
要使其他用户能看到安装了 conda 的目录,您需要将 conda 安装目录的权限设置为公共读、写和执行。以下是一些建议的步骤: 首先,找到 conda 安装目录的路径。您可以使用以下命令来找到它: which conda 这将显示 conda 的版本信息,并显示 conda 安装目录的路径。例如
2023-08-01
84
0
1
linux
Python
python实现代理IP池
用Python写一个代理IP池 文章中的代码仅供学习,请勿用于非法操作,包括但不限于非法获取数据、入侵其他计算机系统等 原理 构造一个代理池,最主要的问题就是池中的ip从哪里来,如果你自己有一个一些代理ip,可以将自己的ip放进去。我这里说的是,如果没有自己的ip,如何从其他地方获取ip。我获取ip
2023-07-29
67
0
1
Python
1
2