Bertopic环境安装与文本主题聚类

文章目录

  • 1.环境配置
    • （一）安装：anaconda
      • 1. 理解：为什么需要anaconda
      • 2. 下载anaconda
      • 3. 启动anaconda
    • （二）安装：python环境
    • （三）安装：依赖包
        • hdbscan的安装问题
        • 解决方案
          • 1. 安装build-tools-for-visual-studio
          • 2. 安装hdbscan
    • （四）安装transformers、BERTopic等重要依赖包
  • 2.BERT预训练模型下载
    • (一)模型原理
    • (二)预训练模型获取
  • 3.BERT模型实战操作
    • 3.1预处理
    • 3.2随机生成数据
    • 3.3用预训练模型生成词向量
    • 3.4文本聚类 ⭐

1.环境配置

（一）安装：anaconda

1. 理解：为什么需要anaconda

不同的python版本适应与相应的依赖包，可以用ANACONDA来管理不同的python版本环境，需要用到哪个环境就调用哪个环境。

本人最常用的就是一个Py3.6的包，这个包很多的版本的库都兼容，但是由于新的出来，一些最新的库已经开始不适配3.6

此前有次，自己的原生代码，在生成WordCloud词云时，从来都不会报错，会出现一个字体的错误。一直没解决，用了很多方法都没解决，后面发现是不适配3.6版本。所以在anaconda中可以再生成一个更高版本的环境。

可以专门用一个python版本，解决相应的问题。

2. 下载anaconda

anaconda下载地址

下载好，双击安装，一直下一步
在这里插入图片描述

3. 启动anaconda

在开始菜单，找到anaconda powershell prompt，输入conda，有输出即可

这样我们就有了管理python版本、依赖包版本

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mzph.cn/diannao/45723.shtml

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈email:809451989@qq.com，一经查实，立即删除！

相关文章

零信任的架构结合模块化沙箱，实现一机两用的解决方案

零信任的架构结合模块化沙箱，实现一机两用的解决方案

零信任沙箱是深信达提出的一种数据安全解决方案，它将零信任原则与SDC沙箱技术的优势相结合。零信任原则是一种安全概念，核心思想是“永不信任，总是验证”。它要求对每一个访问请求都进行严格的身份验证和授权，无论请求来源于内部还…
阅读更多...
从RL的专业角度解惑 instruct GPT的目标函数

从RL的专业角度解惑 instruct GPT的目标函数

作为早期chatGPT背后的核心技术，instruct GPT一直被业界奉为里程碑式的著作。但是这篇论文关于RL的部分确写的非常模糊，几乎一笔带过。当我们去仔细审查它的目标函数的时候，心中不免有诸多困惑。特别是作者提到用PPO来做强化学习，…
阅读更多...
【微信小程序知识点】手机号验证组件

【微信小程序知识点】手机号验证组件

手机验证组件，用于帮助开发者向用户发起手机号申请，必须经过用户同意后，才能获得由平台验证后的手机号，进而为用户提供相应的服务。 手机号验证组件分为两种：手机号快速验证组件以及手机号实时验证组件。 1.手机号快速…
阅读更多...
【微信小程序知识点】自定义构建npm

【微信小程序知识点】自定义构建npm

在实际开发中，随着项目的功能越来越多，项目越来越复杂，文件目录也变得很繁琐，为了方便进行项目的开发，开发人员通常会对目录结构进行优化调整，例如：将小程序源码放到miniprogram目录下。 &…
阅读更多...
Portainer工具

Portainer工具

Portainer是一款免费、开源的Docker的图形化管理工具，其能够提供状态显示面板、应用模板快速部署、容器镜像网络数据卷的基本操作（包括上传下载镜像，创建容器等操作）、事件日志显示、容器控制台操作、Swarm集群和服务等集中管理和…
阅读更多...
Macos 远程登录 Ubuntu22.04 桌面

Macos 远程登录 Ubuntu22.04 桌面

这里使用的桌面程序为 xfce, 而 gnome 桌面则测试失败。 1,安装 在ubuntu上，安装 vnc server与桌面程序xfce sudo apt install xfce4 xfce4-goodies tightvncserver 2，第一次启动和配置 $ tightvncserver :1 设置密码。 然后修改配置&#xff1a…
阅读更多...
JVM 之对象的结构与创建

JVM 之对象的结构与创建

1.对象的创建 1.1类加载 当Java 虚拟机遇到一条字节码 new 指令时，首先将去检查这个指令的参数是否能在常量池中定位到 一个类的符号引用，并且检查这个符号引用代表的类是否已被加载、解析和初始化过。如果没有，那 必须先执行相应的类加载过…
阅读更多...
C# .net6使用Hangfire

C# .net6使用Hangfire

首先我们先来了解什么是Hangfire？ Hangfire 是一个用于 .NET 的任务调度库，允许你在后台运行任务，而不需要依赖外部的任务队列服务或复杂的基础设施。它简化了后台任务的创建、调度和管理过程，使得在 .NET 应用程序中处理长期运行…
阅读更多...
【系统架构设计】操作系统（一）

【系统架构设计】操作系统（一）

操作系统（一） 操作系统的类型和结构操作系统基本原理进程管理进程三态模型挂起状态进程互斥 / 进程同步前趋图进程调度死锁 存储管理设备管理文件管理作业管理 操作系统原理的关键在于“一个观点、两条线索”：一个观点是以资源管理的观点来定…
阅读更多...
【算法笔记自学】第 9 章 提高篇（3）——数据结构专题（2）

【算法笔记自学】第 9 章 提高篇（3）——数据结构专题（2）

9.1树与二叉树 #include <cstdio>int main() {int n, m;scanf("%d%d", &n, &m);printf(n m 1 ? "Yes" : "No");return 0; } 9.2二叉树的遍历 #include <cstdio> #include <vector> using namespace std;const int…
阅读更多...
Java毕业设计 基于SSM vue电影订票系统小程序 微信小程序

Java毕业设计 基于SSM vue电影订票系统小程序 微信小程序

Java毕业设计 基于SSM vue电影订票系统小程序 微信小程序 SSM 电影订票系统小程序 功能介绍 用户 登录 注册 忘记密码 首页 图片轮播 电影信息 电影详情 评论 收藏 预订 电影资讯 资讯详情 用户信息修改 电影评价 我的收藏管理 用户充值 在线客服 我的订单 管理员 登录 个人…
阅读更多...
SpringCloud集成kafka集群

SpringCloud集成kafka集群

目录 1.引入kafka依赖 2.在yml文件配置配置kafka连接 3.注入KafkaTemplate模版 4.创建kafka消息监听和消费端 5.搭建kafka集群 5.1 下载 kafka Apache KafkaApache Kafka: A Distributed Streaming Platform.https://kafka.apache.org/downloads.html 5.2 在config目录下做…
阅读更多...
全渠道AI智能商品管理软件平台 助力零售品牌占领技术高地

全渠道AI智能商品管理软件平台 助力零售品牌占领技术高地

关于7thonline第七在线 1999年创立于纽约&#xff0c;7thonline第七在线全渠道AI智能商品管理平台&#xff0c;以先进的数学算法模型、人工智能和机器学习技术为核心驱动力&#xff0c;融合了众多零售商品管理的卓越实践经验&#xff0c;精心打造出一套深度适配零售业务场景的自…
阅读更多...
[每周一更]-(第105期)：SSL证书过期后引发的DNS缓存问题

[每周一更]-(第105期)：SSL证书过期后引发的DNS缓存问题

问题回顾&#xff1a; ​ 上班路上收到ZeroSSL邮件通知我们清点项目的SSL证书到期了&#xff0c;到公司还是登录网址查看信息&#xff0c;一看果然是7.10也就是今天到期&#xff0c;开始看下acme.sh的定制任务为何没生效&#xff0c;一看crontab脚本&#xff0c;日志任务丢垃圾…
阅读更多...
tomcat和nginx实现动静分离

tomcat和nginx实现动静分离

访问nginx就是静态页面&#xff0c;nginx代理index.jsp可以访问tomcat的动态页面。 实验 1、设备以及IP地址 nginx1 192.168.10.41 tomcat1 192.168.10.51 tomcat2 192.168.10.52 2、tomcat1 的配置 创建动态页面 cd /usr/local/tomcat/webapps 创建一个目录作为一个ser…
阅读更多...
复现ORB3-YOLO8项目记录

复现ORB3-YOLO8项目记录

文章目录 1.编译错误1.1 错误11.2 错误21.3 错误31.4 错误4 1.编译错误 首先ORB-SLAM相关项目已经写过很多篇博客了&#xff0c;从ORB-SLAM2怎么运行&#xff0c;再到现在的项目。关于环境已经不想多说了 1.1 错误1 – DEPENDENCY_LIBS : /home/lvslam/ORB3-YOLO8/Thirdparty…
阅读更多...
Feature Alignment and Uniformity for Test Time Adaptation--论文笔记

Feature Alignment and Uniformity for Test Time Adaptation--论文笔记

论文笔记 资料 1.代码地址 https://github.com/SakurajimaMaiii/TSD 2.论文地址 https://arxiv.org/abs/2303.10902 3.数据集地址 论文摘要的翻译 TTA在接收训练分布外的测试域样本时对深度神经网络进行自适应。在这样设置下&#xff0c;模型只能访问在线未标记的测试样…
阅读更多...
昇思MindSpore学习总结十五 ——基于Mindspore 实现BERT对话情绪识别

昇思MindSpore学习总结十五 ——基于Mindspore 实现BERT对话情绪识别

1、环境配置 根据实际情况&#xff0c;选择合适版本。 %%capture captured_output # 实验环境已经预装了mindspore2.2.14&#xff0c;如需更换mindspore版本&#xff0c;可更改下面mindspore的版本号 !pip uninstall mindspore -y !pip install -i https://pypi.mirrors.ustc…
阅读更多...
MYSQL--第七次作业

MYSQL--第七次作业

MYSQL–第七次作业 在product表上创建三个触发器。每次激活触发器后&#xff0c;都会更新operate表。product表和表的内容如下 Product表内容 字段名 字段描述 数据类型 主键 外键 非空 唯一 自增 Id 产品编号 Int(10) 是 否 是 是 否 Name …
阅读更多...
torch之从.datasets.CIFAR10解压出训练与测试图片 （附带网盘链接）

torch之从.datasets.CIFAR10解压出训练与测试图片 （附带网盘链接）

前言 从官网上下载的是长这个样子的 想看图片&#xff0c;咋办咧&#xff0c;看下面代码 import torch import torchvision import numpy as np import os import cv2 batch_size 50transform_predict torchvision.transforms.Compose([torchvision.transforms.ToTensor(),…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023