DataSet

PyTorch数据归一化处理：transforms

##1.数据归一化处理：transforms.Normalize###1.1理解torchvision*torchvision.transforms：常用的图像预处理方法*torchvision.datasets
2401_87555420·2025-03-22 23:48

Pytorch中的torch.utils.data.Dataset 类

1、使用方法fromtorch.utils.dataimportDataset2、torch.utils.data.Dataset类的定义classDataset(Generic[_T_co]):r""
小白的高手之路·2025-03-22 18:16

回归任务训练--MNIST全连接神经网络（Mnist_NN）

importtorchimportnumpyasnpimportloggingfromtorch.utils.dataimportTensorDataset,DataLoaderfromtorch.utils.dataimportDataLoader
豆芽819·2025-03-22 18:10

深度学习与目标检测系列(三) 本文约(4万字) | 全面解读复现AlexNet | Pytorch |

文章目录解读Abstract-摘要翻译精读主要内容1.Introduction—前言翻译精读主要内容：本文主要贡献：2.TheDataset-数据集翻译精读主要内容：ImageNet简介：图像处理方法：
小酒馆燃着灯·2025-03-22 10:03

Deepseek-R1-Distill-Llama-8B + Unsloth 中文医疗数据微调实战

内容参考至博客与Bin_Nong1.环境搭建主要依赖的库(我的版本)：torch==2.5.1unsloth==2025.2.15trl==0.15.2transformers==4.49.0datasets
LuckyAnJo·2025-03-22 08:47

COMP 315: Cloud Computing for E-Commerce

CloudComputingforE-CommerceFebruary20251IntroductionAcommontaskwhenbackendprogrammingisdatacleaning,whichistheprocessoftakinganinitialdatasetthatmaycontainerroneousorinco
·2025-03-22 05:37

使用LangSmith Chat Datasets微调模型

在这篇文章中，我们将探讨如何通过LangSmithChatDatasets轻松微调模型。这一过程分为三个简单的步骤：创建聊天数据集。使用LangSmithDatasetChatLoader加载示例。
scaFHIO·2025-03-20 04:49

使用LoRA微调LLaMA3

步骤一：环境搭建安装必要的Python包pipinstalltransformersdatasetstorch配置GPU环境确保你的环境中配置了CUDA和cuDNN，并验证GPU是否可用。
想胖的壮壮·2025-03-19 16:12

GEE下载REMA strip和mosaic数据的python脚本

EarthEngineDataCatalog：https://developers.google.com/earth-engine/datasets/catalog搜索REMA：importeeimportgeemapimportosimportwarnings
WiIsonEdwards·2025-03-19 14:59

SparkSQL编程-RDD、DataFrame、DataSet

三者之间的关系在SparkSQL中Spark为我们提供了两个新的抽象，分别是DataFrame和DataSet。他们和RDD有什么区别呢？
早拾碗吧·2025-03-19 14:24

yolov8的第一次实验报告

实验日期:[2025-01-16]2.数据集数据集名称:[datasets]数据集大小:[2.68Gb]数据集描述:[数据集主要分两个类别：zdjy_ld,zdjy_gd]注释：占道经营流动，占道经营固定
算法宇宙·2025-03-18 16:55

学习pear的Image_Graph包的一些笔记

Posted三月31st,2007bystone5image_graph中的对象类型及结构graph----------总图形plotarea-------绘图区plot-------------图块dataset
stone5·2025-03-18 05:24

pytorch的使用：卷积神经网络模块

input_size=28#图像的总尺寸28*28num_classes=10#标签的种类数num_epochs=3#训练的总循环周期batch_size=64#一个撮（批次）的大小，64张图片#训练集train_dataset
樱花的浪漫·2025-03-18 00:11

pytorch中的DataLoader

它与Dataset类结合使用：Dataset：定义数据集的来源、结构以及如何获取单个数据样本。DataLoader：负责从D
朋也透william·2025-03-17 21:48

Pytorch Dataloader入门

PytorchDataloadercode：torch/utils/data/dataloader.py#L71PytorchDatasettutorial:tutorials/beginner/basics
gy-7·2025-03-17 21:16

【人工智能】【Python】在Scikit-Learn中使用决策树算法（ID3和CART）

importnumpyasnpimportmatplotlib.pyplotaspltfromsklearn.datasetsimportload_irisfromsklearn.model_selectionimporttrain_test_splitfromsklearn.treeimportDecisionTreeClassifier
SmallBambooCode·2025-03-17 20:08

Spark sql 中row的用法

它是SparkSQL中DataFrame或Dataset的基本数据单元。每一行数据都由一个Row对象表示，而Row对象中的每个字段对应数据的一个列。
闯闯桑·2025-03-17 18:53

读取RAMS输出文件(RAMS-ISAN文件)的基本程序

importnumpyasnpfromnetCDF4importDatasetimportxarrayasxrdefread_rams_data(filename):"""读取RAMS输出文件的基本函数
Hardess-god·2025-03-17 14:56

COMP9321 25T1

COMP932125T1Assignment1(15marks)IntroductionTheNSWFuelCheckdatasetismaintainedbytheNSWGovernment.ItallowsmotoriststoaccesshistoricalandliveinformationaboutfuelpricesacrossNSW.Wehavedownloadedthe
·2025-03-17 06:52

GGR 376 Spatial Autocorrelation

Assignment2:SpatialAutocorrelationandRegressionDueDate:February28th,2025GGR376DatasetSummaries:DatasetFormatDescriptionTransitShapefiles.shpDifferentkindsoftransitdata–raillines
·2025-03-17 02:17

COMP 315: Cloud Computing

CloudComputingforE-CommerceFebruary20251IntroductionAcommontaskwhenbackendprogrammingisdatacleaning,whichistheprocessoftakinganinitialdatasetthatmaycontainerroneousorinco
·2025-03-16 21:12

COMP 315: Cloud Computing

CloudComputingforE-CommerceFebruary20251IntroductionAcommontaskwhenbackendprogrammingisdatacleaning,whichistheprocessoftakinganinitialdatasetthatmaycontainerroneousorinco
·2025-03-16 21:09

大模型工程师学习日记（十五）：Hugging Face 模型微调训练（基于 BERT 的中文评价情感分析）

1.datasets库核心方法1.1.列出数据集使用datasets库，你可以轻松列出所有HuggingFace平台上的数据集：fromdatasetsimportlist_datasets#列出所有数据集
MMMMMMMay Love Code·2025-03-15 20:52

**ResNet-SE + MFCC** 训练框架，包括 **数据加载、训练流程**，以及 **混淆矩阵** 可视化示例

依赖库安装如果你还没安装相关库，请先执行：pipinstalltorchtorchaudiotorchvisionscikit-learnmatplotlibtqdm2.数据加载这里假设你有一个音频分类数据集，其文件结构如下：dataset
大霸王龙·2025-03-15 19:10

max_samples，batch_size，gradient_accumulation_steps这三个分别的联系和区别

你的代码示例：max_samples=300#每个数据集最多用300条样本解释：假设你的dataset里包含：identity数据集有10,000条数据alpaca_en_demo数
背太阳的牧羊人·2025-03-15 19:09

LLM之Colossal-LLaMA-2：源码解读(init_tokenizer.py文件)实现基于源词表的扩展、(init_model.py文件)实现过计算均值扩展模型、(prepare_pretr

循环去重实现词表的扩展(中文标记的新词汇)→保存新的分词模型、(init_model.py文件)实现过计算均值来扩展模型的嵌入层以适应新的词汇表，然后保存扩展后的模型、(prepare_pretrain_dataset.py
一个处女座的程序猿·2025-03-15 18:38

【Transformer-Hugging Face手册 07/10】 微调预训练模型

2.2训练2.2.1使用PyTorchTrainer进行训练2.3训练超参数2.4评价2.5训练类三、使用Keras训练TensorFlow模型3.1为Keras加载数据3.2将数据加载为tf.data.Dataset3.3
无水先生·2025-03-15 13:54

基于LangChain-Chatchat实现的RAG-本地知识库的问答应用[5]-高阶实战微调

推荐的模型组合在默认的配置文件中，我们提供了以下模型组合LLM:Chatglm2-6bEmbeddingModels:m3e-baseTextSplitter:ChineseRecursiveTextSplitterKb_dataset
汀、人工智能·2025-03-15 11:40

AI推介-大语言模型LLMs论文速览（arXiv方向）：2024.06.25-2024.07.01

文章目录～1.AutoCherry-Picker:LearningfromHigh-qualityGenerativeDataDrivenbyLanguage2.BioMNER:ADatasetforBiomedicalMethodEntityRecognition3
小小帅AIGC·2025-03-15 05:10

ADO.NET 面试题

什么是DataSet？ADO.NET中如何使用事务？什么是存储过程？存储过程的优劣何在？优点缺点什么是参数化查询？什么是事务？事务的并发控制有哪些？什么是连接池
哈希疯·2025-03-14 10:33

基于python的手写数字识别knn_用sklearn中的KNN实现Kaggle手写数字识别

importcsvfromsklearnimportneighbors#导入训练数据和测试数据defloadData(filename1,filename2,trainDataSet,trainTargetSet
普和司·2025-03-14 02:41

【预测】-双注意LSTM自动编码器记录

预测-双注意LSTM自动编码器1预测-双注意LSTM自动编码器1.1复现环境配置1.2数据流记录1.2.1**构建Dataset**(1)**`X`的取数**(2)**`y`的取数**(3)**`target
jarreyer·2025-03-13 02:46

基于hf的trl框架的deepseek-r1-zero实现与训练

导入模块和promt格式"""Reference:"""importreimporttorchfromdatasetsimportload_dataset,DatasetfromtransformersimportAutoTokenizer
喂喂喂喂位·2025-03-12 20:00

深度学习复习笔记（6）线性回归——新冠预测项目

importmatplotlib.pyplotaspltimporttorch#框架importnumpyasnp#矩阵处理importcsv#读excel文件fromtorch.utils.dataimportDataLoader,Dataset
Kriol·2025-03-12 03:27

第N3周：NLP中的数据集构建

其中包括Dataset和DataLoader两个类，它们通常结合使用来加载和处理数据。1.Datasettorch.u
OreoCC·2025-03-12 01:43

Bert的使用

一、Data.py#data负责产生两个dataloaderfromtorch.utils.dataimportDataLoader,Datasetfromsklearn.model_selectionimporttrain_test_split
巨鹿..·2025-03-12 00:31

selectdataset 发布2024最热门Top100数据集

遇见数据集索引了国内外的大部分网站。首页有最新的数据集推荐：GitHub、HuggingFace、arXiv这些热门站点，都属于日级别的更新。这个站点是从搜索引擎方面去监控最新的数据集，大家如果有关注某个一个特点领域或话题的更新，可以关注这个站点：遇见数据集-让每个数据集都被发现，让每一次遇见都有价值。遇见数据集，领先的千万级数据集搜索引擎，实时追踪全球数据集，助力把握数据要素市场。https:/
·2025-03-11 20:06

深度学习PyTorch之数据加载DataLoader

深度学习pytorch之简单方法自定义9类卷积即插即用文章目录数据加载基础架构1、Dataset类详解2、DataLoader核心参数解析3、数据增强数据加载基础架构核心类关系图torch.utils.data
@Mr_LiuYang·2025-03-11 18:49

基于PyTorch的深度学习6——数据处理工具箱2

torchvision有4个功能模块：model、datasets、transforms和utils。
Wis4e·2025-03-11 07:47

鸢尾花数据集的四个特征具体是什么？

鸢尾花数据集（IrisDataset）是机器学习领域中最经典的数据集之一，它包含150个样本，每个样本有4个特征，分别是：1.花萼长度（SepalLength）描述：花萼（花的外部绿色部分）的长度，单位为厘米
学术乙方·2025-03-11 03:41

3.10 项目总结

内容分析1.数据加载和预处理：-使用`torchvision.datasets`加载MN
不要不开心了·2025-03-11 01:58

深度学习项目十一：mmdetection训练自己的数据集

mmdetection训练自己的数据集一：环境搭建二：数据集格式转换(yolo转coco格式)yolo数据集格式coco数据集格式yolo转coco数据集格式yolo转coco数据集格式的代码三：训练dataset
小啊磊_Vv·2025-03-10 17:02

Ardupilot开源无人机之Geek SDK进展2025Q1

Ardupilot开源无人机之GeekSDK进展2025Q11.源由2.内容汇总2.1【jetson-fpv】YOLOINT8+coco8dataset精度降级2.2【OpenIPC-Configurator
lida2003·2025-03-09 19:14

c#面试题整理2

1.介绍一下ADO.NET的类DataSet,SqlDataAdapter,SqlConnection2.ASP.NET和ASP相比有何优点a.代码分离，apsx文件用于页面显示，aspx.cs用于后台逻辑
hhw199112·2025-03-09 16:16

【完整版解决方案】sklearn加州房价数据集出错 housing = fetch_california_housing() HTTPError: HTTP Error 403: Forbidden

fromsklearnimportdatasetsdata_home=datasets.get_data_home()放
getalong·2025-03-08 23:34

新冠病毒感染人数预测（基于回归的神经网络项目）

一、神经网络项目的流程1、数据预处理：（深度学习最主要的数据处理，要先拿到数据）使用CovidDataset类加载和处理数据。根据all_feature参数选择特征
|柳贯一|·2025-03-08 21:09

【Hugging Face】datasets 库：加载、处理和分享大规模数据集

HuggingFaceDatasets库HuggingFace的datasets库是一个轻量级、高性能的库，用于加载、处理和分享大规模数据集，特别适用于自然语言处理（NLP）、计算机视觉（CV）和语音任务
彬彬侠·2025-03-08 15:28

3.6手写数字识别项目

今天的内容为手写数字识别项目1.数据准备：-使用`torchvision.datasets`加载MNIST数据集。
不要不开心了·2025-03-08 11:33

大数据计算框架深入：Spark SQL、DataFrame、RDD 性能优化

1.引言ApacheSpark是当前最流行的大数据计算框架之一，其中SparkSQL、DataFrame和RDD（ResilientDistributedDataset）是数据处理的三大核心API。
晴天彩虹雨·2025-03-08 10:48

FastGPT 源码：RRF、Rerank 相关代码

.整个搜索流程5.这种方式的优势FastGPT源码：RRF、Rerank相关代码下边介绍RRF合并和Rerank二次排序的相关实现：1.RRF(ReciprocalRankFusion)合并实现主要在datasetSearchRes
窝窝和牛牛·2025-03-08 01:31
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他