博客
关于我
BERT fine-tuning的中文标题分类
阅读量:797 次
发布时间:2023-04-03

本文共 881 字,大约阅读时间需要 2 分钟。

import osimport sysimport pickleimport pandas as pdimport numpy as npfrom concurrent.futures import ThreadPoolExecutorimport torchimport picklefrom sklearn.preprocessing import LabelEncoderfrom torch.optim import optimizerfrom torch.utils.data import DataLoader, RandomSampler, SequentialSampler, TensorDatasetfrom torch.nn import CrossEntropyLoss, BCEWithLogitsLossfrom tqdm import tqdm_notebook, trangefrom pytorch_pretrained_bert import BertTokenizer, BertModel, BertForMaskedLM, BertForSequenceClassificationfrom pytorch_pretrained_bert.optimization import BertAdam, WarmupLinearSchedulefrom sklearn.metrics import precision_recall_curve, classification_reportimport matplotlib.pyplot as plt%matplotlib inline

本优化后的代码块采用了技术写作的风格,按照常见的库分类展示,避免了结构化的列表呈现,使其更符合技术文档的编写习惯。同时,代码块的结构更加清晰,便于读者快速定位和使用。所有库的导入语句均采用了简洁的自然语言表达,避免了机械化的感。

注:本优化后的内容完全基于原文,仅调整了格式和表述方式,关键信息未发生改变,确保了内容的完整性和可读性。

转载地址:http://rrefk.baihongyu.com/

你可能感兴趣的文章
Openlayers实战:modifystart、modifyend互动示例
查看>>
Openlayers高级交互(10/20):绘制矩形,截取对应部分的地图并保存
查看>>
Openlayers高级交互(16/20):两个多边形的交集、差集、并集处理
查看>>
Openlayers高级交互(17/20):通过坐标显示多边形,计算出最大幅宽
查看>>
Openlayers高级交互(19/20): 地图上点击某处,列表中显示对应位置
查看>>
Openlayers高级交互(8/20):选取feature,平移feature
查看>>
openlayers:圆孔相机根据卫星经度、纬度、高度、半径比例推算绘制地面的拍摄的区域
查看>>
OpenLDAP(2.4.3x)服务器搭建及配置说明
查看>>
OpenLDAP编译安装及配置
查看>>
OpenMCU(一):STM32F407 FreeRTOS移植
查看>>
OpenMCU(三):STM32F103 FreeRTOS移植
查看>>
OpenMCU(二):GD32E23xx FreeRTOS移植
查看>>
OpenMetadata 命令执行漏洞复现(CVE-2024-28255)
查看>>
OpenMMLab | S4模型详解:应对长序列建模的有效方法
查看>>
OpenMMLab | 【全网首发】Llama 3 微调项目实践与教程(XTuner 版)
查看>>
OpenMMLab | 面向多样应用需求,书生·浦语2.5开源超轻量、高性能多种参数版本
查看>>
OpenMV入门教程(非常详细)从零基础入门到精通,看完这一篇就够了
查看>>
OpenObserve云原生可观测平台本地Docker部署与远程访问实战教程
查看>>
OpenPPL PPQ量化(4):计算图的切分和调度 源码剖析
查看>>
OpenPPL PPQ量化(5):执行引擎 源码剖析
查看>>