python数据处理

Python中的数据处理（列表）——（二）

上次讲了Python数据处理中元组的一些使用方法这次就讲讲列表和列表的使用：本次的内容：目录二、列表Q1：上次留了一个问题，那就是元组中的数据是不可变的，那么列表中的元素可以改变吗？
Gorit·2019-01-05 23:44

Python数据处理从零开始----第二章（pandas）⑧pandas读写csv文件(2)

目录第二章（pandas）Python数据处理从零开始----第二章（pandas）①删除列Python数据处理从零开始----第二章（pandas）②处理缺失数据Python数据处理从零开始----第二章
柳叶刀与小鼠标·2019-01-05 06:28

接口测试---Python数据处理需要注意的细节

一、json模块中的dumps方法请求接口时params肯定是dict类型的，就是这种{"A":"B"}，因为需要传json格式的参数到服务端，但是为了降低case的维护成本，参数不会进行写死，一般会从数据库中拿参数，在服务端有强校验的情况下，格式不正确的参数就会报错，比如说{“KEY”:{'A':B}}这里面value在没有encoding前是dict类型，在请求对应接口时就会response[
Andrea-Pirlo·2019-01-03 15:00

Python数据处理：IPython使用学习笔记

Python数据处理：IPython使用学习笔记Python数据处理：Numpy学习笔记Python数据处理：Pandas学习笔记转载并改编自《IPython使用学习笔记》，原文写得很好，但有些地方还待完成
郭振廷·2018-12-17 21:11

python数据处理 根据颜色对图片进行分类的方法

前面一篇文章有说过，利用scrapy来爬取图片，是为了对图片数据进行分类而收集数据。本篇文章就是利用上次爬取的图片数据，根据图片的颜色特征来做一个简单的分类处理。实现步骤如下：1：图片路径添加2：对比度处理3：滤波处理4：数据提取以及特征向量化5：图片分类处理6：根据处理结果将图片分类保存代码量中等，还可以更少，只是我为了练习类的使用，而将每个步骤都封装成了一个独立的类，当然里面也有类继承的问题，
不论如何未来很美好·2018-12-08 15:08

Python数据处理之（七）Numpy array 合并

一、np.vstack()对array的合并，我们可以想到按行、按列等多种方式进行合并。verticalstack本身属于一种上下合并，即对括号中的两个整体进行对应操作。>>>importnumpyasnp>>>A=np.array([1,1,1])>>>B=np.array([2,2,2])>>>print(np.vstack((A,B)))[[111][222]]>>>C=np.vstack(
布衣书生-Python·2018-11-20 11:05

Pandas入门

Pandas是在Numpy基础上发展的一个python数据处理库，主要的数据结构由Serises和Datafram构成。
DesWong·2018-11-15 00:14

2018年"华为杯"数学建模获奖名单挖掘分析

主要锻炼Python数据处理中的以下功能点的使用：功能点：1.把6张拟获奖名单进行拼接···1.1.1.将6张表横向拼接；···1
jp_zhou256·2018-11-11 23:27

Python数据处理 | (三) Matplotlib数据可视化

Python数据处理系列笔记基于：Python数据科学手册电子版下载密码：ovnh示例代码下载密码:02f4目录一、Matplotlib常用技巧1.导入Matplotlib2.设置绘图样式3.用不用show
CoreJT·2018-11-05 15:07

Python数据处理库pandas入门教程

pandas是一个Python语言的软件包，在我们使用Python语言进行机器学习编程的时候，这是一个非常常用的基础编程库。本文是对它的一个入门教程。pandas提供了快速，灵活和富有表现力的数据结构，目的是使“关系”或“标记”数据的工作既简单又直观。它旨在成为在Python中进行实际数据分析的高级构建块。入门介绍pandas适合于许多不同类型的数据，包括：具有异构类型列的表格数据，例如SQL表格
云栖社区v·2018-09-26 23:04

Python数据处理（二）——美国人的生日

本篇文章的目的：以美国人的生日统计分析为例，熟练统计分组的操作，基本的数据可视化图形绘制；涉及到Python中的numpy、pandas和matplotlib库，包括：df.pivot_table()、plt.ylabel()、np.percentile()、df.query()等函数。本篇也涉及到用Sigma-clippin去除异常值，时间格式的转换等。数据来源：https://github.c
yihan.z·2018-09-21 10:52

python数据处理--按照数据差值大小进行聚类（归类）

近来在做数据处理的工作中，遇到了数据分类的问题，利用python的各种方便库，写了这么个以数据差值大小进行归类的方法。应用场景：有一批数据集，如list=[1,2,3,4,9,10,11,20,20,1,1.1,2.1,100]，将其按照数值大小进行归类，即数值比较接近的归为一类，故需要先设置一个阈值，以进行划分。具体实现如下：其中输入参数Data_set为输入的数据集，可以为列表、数组、Seri
walking_visitor·2018-09-13 09:48

Pandas读取并修改excel

一、前言最近总是和excel打交道，由于数据量较大，人工来修改某些数据可能会有点浪费时间，这时候就使用到了Python数据处理的神器—–Pandas库，话不多说，直接上Pandas。
Debris丶·2018-08-21 09:33

Python数据处理—复杂信号傅里叶变换（FFT）

FFT(FastFourierTransform,快速傅里叶变换)是离散傅里叶变换的快速算法，也是数字信号处理技术中经常会提到的一个概念。用快速傅里叶变换能将时域的数字信号转换为频域信号，转换为频域信号后我们可以很方便地分析出信号的频率成分。单频信号FFT#singlefrequencysignalsampling_rate=2**14fft_size=2**12t=np.arange(0,1,1
heibaisemang·2018-08-16 16:37

Python数据处理过程中一些方法记录

开帖目的：记录一些在写Python工作中经常遇到的一些问题和解决办法，以防遗忘。开发环境：Ubuntu16.04+Python31.lambda我们在coding过程中提到的lambda表达式，通常是在需要一个函数，但是又不想花费精力去构造一个函数的场合下使用，通常也称作它是指匿名函数。通过一个简单的例子了解其用法defg1(x):returnfloat(x)g2=lambdax:float(x)
mote-tao·2018-07-31 11:23

Python数据处理简单认识

数据处理的过程:数据收集、数据录入、数据清洗、数据处理、数据集成、数据管理、数据分析、提供数据服务数据收集:通过注册登记、问卷、面试采访获取数据，或者科学家勘测、测量的数据以及实验文档记录,公司报表等都是获取数据的方式.数据清洗:数据清洗可以简单分为这几个过程:解析、修正、标准化,合并解析：将无结构的文本转化为字段和值的有结构的数据修正：将无效的Unknown或缺失值按照实际情况来修改为合适的值缺
Awangbsi·2018-07-05 17:31

Python数据处理与计算——概述

Python是一种面向对象的，动态的程序设计语言，具有非常简洁而清晰的语法，适合于完成各种高层任务。它既可以用来快速开发程序脚本，也可以用来开发大规模的软件。随着NumPy、SciPy、Matplotlib、Enthoughtlibrarys等众多程序库的开发，Python越来越适合于做科学计算、绘制高质量的2D和3D图像。与科学计算领域最流行的商业软件MATLAB相比，Python是一门通用的程
weixin_30588827·2018-06-03 11:00

Python数据处理方法总结

Python是一门非常简洁的语言，能够使用简单的代码实现非常丰富的功能。在数据处理方面，常用的python包有pandas和numpy。本次总结了基于参加一个机器学习比赛进行，主要是预测用户银行卡一周之后的余额。整个过程分为数据预处理阶段和预测阶段，重点介绍数据预处理阶段，这里涉及很多pandas的功能使用，总结一下便于以后查阅。1.读取和保存txt文件新建dataframe的方法：data={'
思辨·2018-05-12 19:18

python数据处理 根据颜色对图片进行分类

前面一篇文章有说过，利用scrapy来爬取图片，是为了对图片数据进行分类而收集数据。本篇文章就是利用上次爬取的图片数据，根据图片的颜色特征来做一个简单的分类处理。实现步骤如下：1：图片路径添加2：对比度处理3：滤波处理4：数据提取以及特征向量化5：图片分类处理6：根据处理结果将图片分类保存代码量中等，还可以更少，只是我为了练习类的使用，而将每个步骤都封装成了一个独立的类，当然里面也有类继承的问题，
不论如何未来很美好·2018-05-10 12:29

python数据处理库numpy、pandas数组操作

1.numpy1.1数组行列importnumpyasnpdata_np=np.array(data)data_col=data_np[:,2:]data_row=data_np[]1.2数组拼接按列拼接data_cat_col=np.concatenate（（data_left,data_right）,axis=1）按行拼接1data_cat_row=np.concatenate（（data_t
PandaXingHello·2018-05-04 18:46

python数据处理 json字符串转换成字典

今天工作的时候遇到了这个问题，花了一个小时才解决这个问题，回到家记录一下。有时候，爬虫爬取的数据是json字符串，大概模式如下：'[{"id":1,"num":1},{"id":2,"num":2},{"id":3,"num":3}]'处理这类json字符串时候，需要用到json库的json.loads()函数。类似代码如下：res=str(string,encoding="utf-8")list
FreshHand1024·2018-04-27 20:00

Python数据处理：pandas手册总结

本文是对pandas官方网站上《10Minutestopandas》的一个简单的翻译，原文在这里。这篇文章是对pandas的一个简单的介绍，详细的介绍请参考：Cookbook。习惯上，我们会按下面格式引入所需要的包：一、创建对象可以通过DataStructureIntroSetion来查看有关该节内容的详细信息。1、可以通过传递一个list对象来创建一个Series，pandas会默认创建整型索引
董公子·2018-04-06 00:13

Python数据处理numpy.median的实例讲解

numpy模块下的median作用为：计算沿指定轴的中位数返回数组元素的中位数其函数接口为：median(a,axis=None,out=None,overwrite_input=False,keepdims=False)其中各参数为：a：输入的数组；axis：计算哪个轴上的中位数，比如输入是二维数组，那么axis=0对应行，axis=1对应列；out：用于放置求取中位数后的数组。它必须具有与预期
chaibubble·2018-04-02 16:18

Python数据处理的瑞士军刀：pandas

Python数据处理的瑞士军刀：pandas重点内容第一篇：基本数据结构介绍一、Pandas介绍终于写到了作者最想介绍，同时也是Python在数据处理方面功能最为强大的扩展模块了。
teslalin·2017-12-17 23:10

Pandas100秒处理一亿行数据

Python数据处理心得－－Pandas100秒处理一亿行数据1.背景－为啥要用pandas公司的日常运营数据通过大数据平台（HIVESQL）通过汇总后，推送给业务部门进行日常分析的数据仍然非常大。
jambone·2017-12-11 09:15

Python数据处理pandas、numpy等第三方库函数笔记（持续更新）

说明因为在平时学习中，对于pandas、numpy等python库的一些函数用法时常忘记，特在此做个汇总与整理，便于下次查找~numpynonzero(a)：返回非零的数组下标举例：>>x=np.array([[1,0,0],[0,2,0],[1,1,0]])>>xarray([[1,0,0],[0,2,0],[1,1,0]])>>np.nonzero(x)(array([0,1,2,2],dty
OraYang·2017-09-11 11:17

Python数据处理笔记——matplotlib篇（一）

关键词：坐标轴范围，图像保存，坐标轴密度，axes自适应figure，matplotlib面向对象，部分理论概念简单的小例子importmatplotlib.pyplotaspltpath=""plt.plot([4,7,1,9,4])#绘图，如果只有一个list默认其为Y轴，X轴数据为其索引值plt.ylabel("grade")plt.axis([-2,8,0,12])#axis函数接收一个l
cdqn10086·2017-09-11 09:06

南京大学MOOC用python玩转数据课程笔记

常用的python数据处理库：numpy，pandas，matplotlib，IPython，SciPy，scikit-learn，Theano。
涯若·2017-08-16 16:01

利用nodemcu以及Python数据处理进行的wifi的局域网远程温度测量

来自我的个人网站:http://wangbch.comIOT.NodeMcu.Temperature实现了利用nodemcu以及Python数据处理进行的wifi的局域网远程温度测量准备采用传感器DS18B20
BC_Wang·2017-07-10 08:01

Python数据处理实战

一、运行环境1、python版本2.7.13博客代码均是这个版本2、系统环境：win764位系统二、需求对杂乱文本数据进行处理部分数据截图如下，第一个字段是原字段，后面3个是清洗出的字段，从数据库中聚合字段观察，乍一看数据比较规律，类似（币种金额万元）这样，我想着用sql写条件判断，统一转换为‘万元人民币’单位，用sql脚本进行字符串截取即可完成，但是后面发现数据并不规则，条件判断太多清洗质量也不
qfedu·2017-06-13 10:00

Python数据处理实战

一、运行环境1、python版本2.7.13博客代码均是这个版本2、系统环境：win764位系统二、需求对杂乱文本数据进行处理部分数据截图如下，第一个字段是原字段，后面3个是清洗出的字段，从数据库中聚合字段观察，乍一看数据比较规律，类似（币种金额万元）这样，我想着用sql写条件判断，统一转换为‘万元人民币’单位，用sql脚本进行字符串截取即可完成，但是后面发现数据并不规则，条件判断太多清洗质量也不
python233·2017-06-11 23:00

python数据处理

一、Numpy库入门ndarray对象的属性.ndim秩，即轴的数量或维度的数量.shapendarray对象的尺度，对于矩阵，n行m列.sizendarray对象元素的个数，相当于.shape中n*m的值.dtypendarray对象的元素类型.itemsizendarray对象中每个元素的大小，以字节为单位ndarray数组的创建方法从Python中的列表、元组等类型创建ndarray数组x=
leonaxiong·2017-05-06 20:02

kaggle入门（python数据处理）

目前入坑机器学习machinelearning，kaggle算是最著名的机器学习比赛（其实主要是特征工程），所以如果想走算法岗，光理论肯定不行，一定要实战，就拿kaggle开刀了，不求多好的结果，但求通过参与的过程对数据挖掘有更好的贴近数据项目的体验，最近与DC的Oliver组成了jo-team。开始一步一步踏坑了，下面是我看到的一些数据处理以及训练的方法，主要是python的。bestpaact
JasonZhangOO·2017-04-03 22:45

python数据处理--独立样本t检验

1t检验由来t检验是威廉·戈斯特为了观测酿酒品质在1908年提出的，student是他的笔名，戈斯特受雇于都柏林的健力士酿酒厂担任统计学家。戈斯特提出t检验以降低啤酒质量监控的成本。戈斯特在1908年《Biometrika》期刊上公布，老板认为其为商业机密被迫使用笔名。2常用的t检验2.1单样本检验单样本检验也称样本均数和总体均数的比较的t检验。用于正态分布的总体中获取n个样本，判断总体均数μ是否
Sohnia·2017-02-04 23:08

我来做数据--如何对数据进行处理以满足机器学习技术(一)：婴儿名字频率数据

标签（空格分隔）：python数据处理SSA提供了一份从1880到2010年的婴儿名字频率数据。我们主要用这份数据来做以下的处理：计算指定名字（可以是你自己的，也可以是别人的）的年度比例。
我是小居居·2016-10-29 21:58

我来做数据--如何对数据进行处理以满足机器学习技术(一)：婴儿名字频率数据

标签（空格分隔）：python数据处理SSA提供了一份从1880到2010年的婴儿名字频率数据。我们主要用这份数据来做以下的处理：计算指定名字（可以是你自己的，也可以是别人的）的年度比例。
我是小居居·2016-10-29 21:58

python3基础

虽然是很好入门的编程语言，但总是有一种飘飘然的感觉，一般情况，学习编程语言最基本的就是它的数据类型，基本运算符，容器，IO，线程，但是回想一下python，什么都想不起来，连基本数据类型都说不上来，只记得用过它的包而且，在python
yezonggang·2016-07-07 16:00

Python数据处理相关小例编程

有5名某界大佬xiaoyun、xiaohong、xiaoteng、xiaoyi和xiaoyang，其QQ号分别是88888、5555555、11111、1234321和1212121，用字典将这些数据组织起来。编程实现以下两个功能：（1）用户输入某一个大佬的姓名后可以输出其QQ号，如果输入的姓名不在字典中则返回提示信息并允许再次输入；（2）寻找所有有QQ靓号（5位数或小于5位数）的大佬，输出所有姓
____Emma__·2016-05-16 21:20

Python数据分析示例（3）Day4

说明：本文章为Python数据处理学习日志，主要内容来自书本《利用Python进行数据分析》，WesMcKinney著，机械工业出版社。
u010456562·2016-05-08 17:00

Python数据分析示例（2）Day3

说明：本文章为Python数据处理学习日志，主要内容来自书本《利用Python进行数据分析》，WesMcKinney著，机械工业出版社。
u010456562·2016-05-07 11:00

Python数据分析示例（1）Day2

说明：本文章为Python数据处理学习日志，主要内容来自书本《利用Python进行数据分析》，WesMcKinney著，机械工业出版社。
u010456562·2016-05-06 16:00

准备工作Canopy安装Day1

说明：本文章为Python数据处理学习日志，主要内容来自书本《利用Python进行数据分析》，WesMcKinney著，机械工业出版社。
u010456562·2016-05-06 12:00

用 Python 做数据处理必看：12 个使效率倍增的 Pandas 技巧（上）

本文旨在提供Python数据处理的12种方法。文中也分享了一些会让你
Guangzhan·2016-01-29 19:33

python数据处理之基本函数

一、基本函数篇 1）python strip()函数介绍 函数原型 声明：s为字符串，rm为要删除的字符序列 s.strip(rm) 删除s字符串中开头、结尾处，位于 rm删除序列的字符 s.lstrip(rm) 删除s字符串中开头处，位于 rm删除序列的字符 s.rstrip(rm) 删除s字符串中结尾处，位于 rm删除序列的字符 注意： 当rm为空时，默认删除空白符（包
·2015-10-27 15:23

python处理blog文件数据

下面是Python数据处理的题目说明与要求：Theattachmentisalogfileusedtoshowrunningstatusofset-top-box,andeachlineinthefilefollowstheformatof
sjtu_chenchen·2015-06-06 11:00

量化分析师的Python日记【第5天：数据处理的瑞士军刀pandas】

 http://q.datayes.com   Python数据处理的瑞士军刀：pandas 第一篇：基本数据结构介绍 一、Pandas介绍 终于写到了作者最想介绍，同时也是
ookiddy·2015-05-06 09:00

python数据处理库pandas

http://blog.csdn.net/pipisorry/article/details/18012125Pandas介绍通常，大家会建议你先学习NumPy，一个支持多维数组的库。但现在我几乎不使用NumPy，因为NumPy越来越成为一个被其他库所使用核心库，这些库通常具有更优雅的接口。因此，Pandas成为了处理数据所主要使用的库。它可以以各种格式（包括数据库）输入输出数据、执行join以及
pipisorry·2014-01-08 21:00

Python学习入门基础教程(learning Python)--1.4 Python数据处理基础 .

 本节主要讨论数据操作及运算符等基础知识，熟悉C语言相关知识的读者请跳过此节。      在高级语言编程过程中，有了数据以后通常要对数据进行相应的数据处理，加、减、乘、除等基本运算，不难理解。    在Python里           a**b代表a的b次方。           a % b是求a模b的余数。           a // b表示两数整除的意思      而 a / b 如不能整
python族·2013-08-22 14:00

做计算机研究的几种好工具

C++核心代码Matlab构造原型Python数据处理C#制作界面Latex编写文档
Yong_Luo·2010-05-16 10:00
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他