实用的数据科学Python库有什么功能

发布时间:2021-11-20 11:12:42 作者:iii
来源:亿速云 阅读:195

本篇内容介绍了“实用的数据科学Python库有什么功能”的有关知识,在实际案例的操作过程中,不少人都会遇到这样的困境,接下来就让小编带领大家学习一下如何处理这些情况吧!希望大家仔细阅读,能够学有所成!

1. 获取数据

获取数据是解决数据科学问题的关键一步。你需要提出一个问题并最终解决它。这取决于你是如何以及从何处获取数据的。获取数据较好的方法就是从Kaggle上下载或从网络上抓取。

当然,你也可以采用适当的方法和工具从网络上抓取数据。

网络数据抓取最重要、最常用的库包括:

1.Beautiful Soup

2.Requests

3.Pandas

Beautiful Soup是一个可从HTML和XML文件中提取数据的Python库。推荐读者阅读Beautiful Soup库官方文档。

如果已经安装Python,只需输入以下命令,即可安装Beautiful Soup。文中所涉及的库全部给出了安装方法。但是我更推荐读者使用Google  Colab,便于练习代码。在Google Colab中,无需手动安装,只需要输入“importlibrary_name”,Colab就会自动安装。

pip install beautifulsoup4

导入Beautiful Soup库:

from bs4 import BeautifulSoupSoup = BeautifulSoup(page_name.text,  ‘html.parser’)

Python的Requests库采用更加简单易用的方式发送HTTP请求。Requests库中有很多种方法,其中最常用的是request.get()。在URL转发成功或失败的情况下,request.get()都能够返回URL转发状态。

安装Requets:

pip install requests

导入Requests库:

import requestspaga_name = requests.get('url_name')

Pandas是一种方便易用的高性能数据结构,同时也是Python编程语言分析工具。Pandas提供了一种能够清晰、简洁地存储数据的数据框架。

安装Pandas:

pip install pandas

导入Pandas库:

import pandas as pd

2. 清理数据

清理数据有许多重要的步骤,往往包括清除重复行、清除异常值、查找缺失值和空值,以及将对象值转换成空值并绘制成图表等。

数据清理常用的库包括:

1.Pandas

2.NumPy

Pandas可以说是数据科学中的“万金油”——到处都可用。关于Pandas的介绍详见上文,此处不再赘述。

NumPy即Numeric  Python,是一个支持科学计算的Python库。众所周知,Python本身并不支持矩阵数据结构,而Python中的NumPy库则支持创建和运行矩阵计算。

运行以下命令下载NumPy(确保已经安装了Python):

python -m pip install --user numpy scipy matplotlib ipython jupyter pandas  sympy nose

导入NumPy库:

import numpy as np

3. 探索数据

探索性数据分析(Exploratory Data Analysis,  EDA)是用于增强信息索引理解的工具,通过有规律地删减和用图表绘制索引基本特征实现。使用EDA能够帮助用户更加深入、清晰地探索数据,展现重要信息采集的发布或情况。

运行EDA常用的库包括:

1.Pandas

2.Seaborn

3.Matplotlib.pyplot

Pandas:详见上文。

Seaborn是一个Python数据可视化库,为绘制数据图表提供了一个高级接口。安装新版本的Seaborn:

pip install seaborn

推荐读者阅读Seaborn官方文档:https://seaborn.pydata.org/examples/index.html?source=post_page-----a58e90f1b4ba----------------------#example-gallery

使用Seaborn,可以轻松绘制条形图、散点图、热力图等图表。导入Seaborn:

import seaborn as sns

Matplotlib是一个Python  2D图形绘图库,能够在多种环境中绘制图表,可替代Seaborn。事实上,Seaborn是基于Matplotlib开发的。

安装Matplotlib:

python -m pip install -U matplotlib

推荐阅读Matplotlib官方文档:https://matplotlib.org/users/index.html?source=post_page-----a58e90f1b4ba----------------------

导入Matplotlib.pyplot库:

import matplotlib.pyplot as plt

4. 构建模型

构建模型是数据科学中的关键一步。由于这一步要求根据要解决的问题和所获取的数据来构建机器学习模型,所以和其他步骤相比难度更大。在这一步中,问题陈述是至关重要的一点,因为它会影响对问题的定义和提出的解决方法。网络上大部分公开的数据集都是基于某一个问题收集的,因此解决问题的能力就尤为重要。而且,由于没有某个特定的算法最适合自己,你需要在多种算法中进行选择,考虑数据适合用回归、分类、聚类还是降维算法。

选择算法经常是一件让人头疼的事。读者可以使用SciKit learn算法选择路径图来记录追踪哪个算法的性能最优。下图展示了一张SciKit  learn的路径图:

实用的数据科学Python库有什么功能

不难猜出,建模时最常用的库是:

1.SciKit learn

SciKit learn是Python中一个便于使用的构建机器学习模型的库。它是基于NumPy、SciPy和Matplotlib开发的。SciKit  learn库官方文档如下:https://scikit-learn.org/stable/?source=post_page-----a58e90f1b4ba----------------------

导入scikit learn:

import sklearn

安装scikit learn:

pip install -U scikit-learn

5. 呈现数据

这是数据科学的最后一步,也是很多人不想做的一步——毕竟没有人想要公开发表他们的数据发现。呈现数据也是有法可循的,并且这个方法极为重要,因为无论如何,成果最终还是要向人们展示的。而且由于人们并不关心所使用的的算法,他们只关心结果,所以展示还要做到简洁明了。

同时,安装如下指令给notebook配备展示选项:

pip install RISE

“实用的数据科学Python库有什么功能”的内容就介绍到这里了,感谢大家的阅读。如果想了解更多行业相关的知识可以关注亿速云网站,小编将为大家输出更多高质量的实用文章!

推荐阅读:
  1. Win10有什么实用的隐藏功能?
  2. 3个用于数据科学的顶级Python库

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

python

上一篇:Fluentd中如何配置通用参数适用于所有插件

下一篇:Fluentd如何实现系统配置

相关阅读

您好,登录后才能下订单哦!

密码登录
登录注册
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》