高哲技术博客 高哲技术博客
首页
编程
爬虫
运维
硬件
收藏
归档
关于

嘉美伯爵

前途光明,无需畏惧
首页
编程
爬虫
运维
硬件
收藏
归档
关于
  • 架构

  • 思想

  • 语言

  • 设计模式

  • 微服务

  • 数据分析

  • 人工智能

    • 基础

      • GPT家族常用术语汇总
      • 机器学习常用术语
      • jupyter使用整理归纳
      • colab使用教程
      • 单机多卡分布式训练
      • 机器学习踩坑汇总
      • llm大语言模型概念篇
      • 关于huggingface transformers的学习和汇总
      • 中文NLP整理及汇总
        • spacy
    • 部署

    • 大模型

    • 传统模型

    • 调研

    • 落地

    • 评估

  • 区块链

  • 数据结构

  • 技术调研

  • 性能优化

  • 生产问题

  • 编程
  • 人工智能
  • 基础
fovegage
2023-08-22
目录

中文NLP整理及汇总

# spacy

# https://blog.csdn.net/weixin_42486623/article/details/124976040
spacy是Python自然语言处理(NLP)软件包,可以对自然语言文本做词性分析、命名实体识别、依赖关系刻画,以及词嵌入向量的计算和可视化等

# 下载
python -m spacy download zh_core_web_sm

tok2vec: 分词
tagger: 词性标注
parser: 依存分析
senter: 分句
ner: 命名实体识别
attribute_ruler: 更改属性映射(没有具体了解)
1
2
3
4
5
6
7
8
9
10
11
12

上次更新: 2023-09-07 23:06:40
关于huggingface transformers的学习和汇总
pytorch部署教程及相关理论理解

← 关于huggingface transformers的学习和汇总 pytorch部署教程及相关理论理解→

最近更新
01
token embed和postion embed
06-10
02
k8s pod日志排查问题
10-24
03
golang内部私服建设方案
10-21
更多文章>
Theme by Vdoing | Copyright © 2018-2025 嘉美伯爵 | 鲁ICP备20001560号-4
  • 跟随系统
  • 浅色模式
  • 深色模式
  • 阅读模式