nlp学习笔记

目录

很多入门例子

bert chinese


很多入门例子

https://github.com/lansinuote/Huggingface_Toturials

bert chinese

import torch 
import torch.nn as nn
from transformers import AutoTokenizer, AutoModel, BertModel, TFBertModel, BertTokenizer

# youpath = 'D:/bert-base-chinese'
# tokenizer =AutoTokenizer.from_pretrained(youpath)

tokenizer = BertTokenizer.from_pretrained(
    pretrained_model_name_or_path='bert-base-chinese',
    cache_dir=None,
    force_download=False,
)

model = BertModel.from_pretrained('bert-base-chinese')

相关推荐

  1. HuggingFace学习笔记--利用API实现简单的NLP任务

    2024-06-11 09:08:03       29 阅读
  2. nlk学习笔记 新闻摘要自动提取

    2024-06-11 09:08:03       24 阅读
  3. NLP11-迁移学习

    2024-06-11 09:08:03       14 阅读
  4. NLP学习路线总结

    2024-06-11 09:08:03       12 阅读

最近更新

  1. 第九章 Three.js 高级材质与着色器 (一)

    2024-06-11 09:08:03       0 阅读
  2. 浔川画板v5.0——浔川python科技社

    2024-06-11 09:08:03       0 阅读
  3. C# —— for循环语句

    2024-06-11 09:08:03       0 阅读
  4. 鸿蒙开发:【启动本地PageAbility】

    2024-06-11 09:08:03       0 阅读
  5. 地学类期刊最新CiteScore™ 汇总

    2024-06-11 09:08:03       0 阅读
  6. 怎么通过AI构架一个个人简介并且写出来

    2024-06-11 09:08:03       0 阅读

热门阅读

  1. STM32 ST-LINK Utility的下载安装使用说明如下:

    2024-06-11 09:08:03       5 阅读
  2. 观察者模式

    2024-06-11 09:08:03       6 阅读
  3. C#面:什么是DLL文件,使用它们有什么好处

    2024-06-11 09:08:03       6 阅读
  4. ArcGIS要点和难点以及具体应用和优缺点介绍

    2024-06-11 09:08:03       6 阅读
  5. 70、最长上升子序列

    2024-06-11 09:08:03       3 阅读
  6. 国内外网络安全现状分析

    2024-06-11 09:08:03       4 阅读