百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术文章 > 正文

11-Python 库将数百行代码浓缩为一行

itomcoil 2025-01-10 14:19 16 浏览

#寻找热爱表达的你#

在今天的文章中,我们选取了 11 个 Python 库,测试了它们在效率和优化方面的流行说法是否真实。

这些库以将数百行代码简化为几行甚至一行而闻名!? 它们不仅让你的项目更加流畅,还帮助你避免为不同流程重复编写相同的代码。

我已经汇编了 11 个常用且非常实用的库。每个例子都会展示使用和不使用这些库的代码效果,让你清晰地感受到它们的影响。?

所以,记得看到最后——你绝不会想错过!

1. Pandas

我们将通过一个例子展示如何将多行复杂代码转换为一行,使其更容易阅读,同时减少执行时间。这就是为什么我如此喜欢 Python 库!

假设一个电商网站需要根据销售额和数量计算产品的销售数据。假设数据如下:

category,sales
Electronics,200
Clothing,150
Electronics,300
Clothing,100
Electronics,400
Furniture,250
Furniture,150

你有一个名为 sales_data.csv 的 CSV 文件,内容如下:

import pandas as pd

# 步骤 1:读取 CSV 文件并转换为 DataFrame
df = pd.read_csv('sales_data.csv')

# 步骤 2:按 'category' 分组并计算每个类别的平均销售额
mean_sales = df.groupby('category')['sales'].mean()

# 步骤 3:打印结果
print(mean_sales)

最终输出:

category
Clothing       125.0
Electronics    300.0
Furniture      200.0
Name: sales, dtype: float64

代码解释:

代码首先导入了 Pandas 库,然后通过 pd.read_csv('sales_data.csv') 读取 CSV 文件,并将其加载到名为 df 的 DataFrame 中。df.groupby('category')['sales'].mean() 对 DataFrame 按 'category' 列分组,并计算每个类别的 'sales' 列的平均值,最后通过 print(mean_sales) 输出结果。

使用 Pandas 的简化版代码为:

df = pd.read_csv('data.csv').groupby('category').mean()

2. Numpy

同样,我们来看一下 Numpy,它是一个功能丰富的 Python 库,能够将复杂的多行代码转换为高效的一行代码。这个库主要用于处理数值问题,支持大规模的多维数组和矩阵,并提供各种数学函数操作这些数组。

Numpy 替代了传统的循环操作,使用了高效的向量化操作,特别是在处理大数据集时运行速度更快。

在本演示中,我们将使用 np.dot() 函数在一行中相乘两个矩阵。假设你有以下两个矩阵:

matrix1 = [[1, 2],
           [3, 4]]

matrix2 = [[5, 6],
           [7, 8]]

import numpy as np

# 步骤 1:使用 Numpy 数组定义矩阵
matrix1 = np.array([[1, 2],
                    [3, 4]])

matrix2 = np.array([[5, 6],
                    [7, 8]])

# 步骤 2:使用 np.dot() 执行矩阵乘法
result = np.dot(matrix1, matrix2)

# 步骤 3:打印结果
print("Result (With Numpy):")
print(result)

输出:

Result (With Numpy):
[[19 22]
 [43 50]]

3. SQLAlchemy

在本系列中,我们探讨了如何使用 Python 库将复杂的多行代码简化为一行解决方案。接下来是 SQLAlchemy,这是一个用于在 Python 中处理数据库的强大库。让我们快速了解一下 SQLAlchemy 的作用及其性能优势。

传统上,使用数据库时,需要编写冗长、重复的 SQL 语句。例如,创建一个表需要编写完整的 CREATE TABLE SQL 语句,手动定义列类型,并管理数据库架构。但使用 SQLAlchemy,你可以通过一行代码概括这个过程。

例如,使用 SQLAlchemy 的 declarative_base() 可以用更 Python 化的方式定义表,而不是手动编写 SQL。

Base.metadata.create_all(engine)  # 创建所有定义的表

插入数据时,SQL 语句通常涉及多行 INSERT INTO 语句。而使用 SQLAlchemy,你可以这样简化:

session.add_all(new_users)  # 一行代码添加多个用户

最终输出将会是:

User ID: 1, Username: Alice
User ID: 3, Username: Charlie

4. Scikit-learn

前面提到的几个 Python 库都是为特定任务设计的。同样,Scikit-learn 也是专为机器学习任务设计的,简化了数据预处理和模型训练。

我们以著名的鸢尾花数据集为例,使用该库来训练模型并预测花朵是否属于 Iris Setosa 物种。

import numpy as np
import pandas as pd
from sklearn import datasets
from sklearn.model_selection import train_test_split
from sklearn.linear_model import LogisticRegression
from sklearn.metrics import accuracy_score

# 步骤 1:加载数据集
iris = datasets.load_iris()
X = iris.data  # 特征
y = (iris.target == 0).astype(int)  # 二元目标:1 表示 Setosa,否则为 0

# 步骤 2:拆分数据集
X_train, X_test, y_train, y_test = train_test_split(X, y, test_size=0.2, random_state=42)

# 步骤 3:创建并训练逻辑回归模型
model = LogisticRegression(max_iter=200).fit(X_train, y_train)

# 步骤 4:做出预测
y_pred = model.predict(X_test)

# 步骤 5:计算准确率
accuracy = accuracy_score(y_test, y_pred)

# 步骤 6:打印准确率
print(f'Accuracy: {accuracy * 100:.2f}%')

简化代码如下:

from sklearn import datasets
from sklearn.model_selection import train_test_split
from sklearn.linear_model import LogisticRegression
from sklearn.metrics import accuracy_score

X, y = datasets.load_iris(return_X_y=True)
y = (y == 0).astype(int)
X_train, X_test, y_train, y_test = train_test_split(X, y, test_size=0.2, random_state=42)

accuracy = accuracy_score(y_test, LogisticRegression(max_iter=200).fit(X_train, y_train).predict(X_test))
print(f'Accuracy: {accuracy * 100:.2f}%')

输出:

Accuracy: 100.00%

5. Matplotlib/Seaborn

MatplotlibSeaborn 是两个能够帮助你在代码中有效可视化数据的 Python 库。这些库在 Python 数据可视化中至关重要,提供了用极少代码创建复杂图表的简单方法。你可以使用它们创建静态、动画或交互式的可视化图表。

今天我们将重点介绍如何将多行代码压缩为单行代码。例如,先看一个使用 Matplotlib 创建柱状图的基本代码片段,然后用 Seaborn 的 sns.barplot 将其转换为单行代码。

传统方法示例 (使用 Matplotlib 的多行代码)

import matplotlib.pyplot as plt

categories = ["A", "B", "C", "D"]
values = [10, 15, 7, 12]

# 创建柱状图
plt.bar(categories, values)
plt.xlabel("Category")  # x 轴标签
plt.ylabel("Value")  # y 轴标签
plt.title("Bar Plot of Categories")  # 图表标题
plt.show()  # 显示图表

Seaborn 示例 (单行代码)

import seaborn as sns

# 假设 'df' 是包含 'category' 和 'value' 列的 DataFrame
sns.barplot(x="category", y="value", data=df)  # 这样就足够了

对于数据可视化,这些库可以用极少的代码创建复杂的图表。


6. Requests

使用 Requests,你可以用几行甚至一行代码执行复杂的操作。Requests 是什么?简言之,它是一个特别适用于网页抓取和与 Web API 交互的 Python 库。

通过 Requests 的简单 HTTP 语法,你可以进行请求(GET, POST, PUT, DELETE 等),无需处理诸如套接字和 HTTP 头等底层细节。

传统方法示例

import http.client
import json

conn = http.client.HTTPSConnection("api.example.com")
conn.request("GET", "/data")

response = conn.getresponse()
data = response.read()
parsed_data = json.loads(data)

conn.close()

使用 Requests 库,这个操作可以用一行代码完成:

import requests

response = requests.get('https://api.example.com/data')

7. BeautifulSoup

BeautifulSoup 是代码行的“消除器”。当处理 HTML 以提取数据时,流程可能会变得复杂且耗时,常常导致代码冗长。但使用 BeautifulSoup,你可以简化这个过程,把几百行代码缩短为几行。

传统方法示例

from html.parser import HTMLParser

class MyHTMLParser(HTMLParser):
    def __init__(self):
        super().__init__()
        self.links = []

    def handle_starttag(self, tag, attrs):
        if tag == 'a':
            for attr in attrs:
                if attr[0] == 'href':
                    self.links.append(attr[1])

# 示例 HTML 内容
html_content = """
<html>
<head><title>Sample Page</title></head>
<body>
<a href="https://example.com/page1">Link 1</a>
<a href="https://example.com/page2">Link 2</a>
</body>
</html>
"""

# 解析 HTML
parser = MyHTMLParser()
parser.feed(html_content)

# 输出提取的链接
print(parser.links)

使用 BeautifulSoup,相同的程序可以以更简洁的方式完成:

from bs4 import BeautifulSoup

# 示例 HTML 内容
html_content = """
<html>
<head><title>Sample Page</title></head>
<body>
<a href="https://example.com/page1">Link 1</a>
<a href="https://example.com/page2">Link 2</a>
</body>
</html>
"""

# 解析 HTML 并提取所有 'a' 标签
soup = BeautifulSoup(html_content, 'html.parser')
links = soup.find_all('a')

# 输出提取的链接
for link in links:
    print(link['href'])

8. Regex (re)

Python 的 re(正则表达式)模块用于字符串操作和模式匹配。它可以帮助你查找符合特定模式的字符序列,比如 "abbbaaaccbac",用于识别、提取或替换字符串的某些部分。

传统方法示例

# 手动提取电子邮件
text = "Contact us at support@example.com or sales@domain.com for more info."

emails = []
words = text.split()

# 手动检查电子邮件
for word in words:
    if "@" in word and "." in word:
        emails.append(word)

# 输出找到的电子邮件
print(emails)

使用 Regex,你可以轻松地在一行代码中匹配复杂模式(如电子邮件地址):

import re

# 示例文本
text = "Contact us at support@example.com or sales@domain.com for more info."

# 查找文本中的所有电子邮件地址
emails = re.findall(r'\b[A-Za-z0-9._%+-]+@[A-Za-z0-9.-]+\.[A-Z|a-z]{2,}\b', text)

# 输出找到的电子邮件
print(emails)

9. Dask

Dask 提供了更灵活的处理方式,尤其是处理大型数据集时。使用 Dask 处理大量数据,避免了手动处理耗时且冗长的代码。

传统方法示例

import pandas as pd

# 手动读取并处理每个 CSV 块
chunks = pd.read_csv('data1.csv', chunksize=10000)
df_list = []

for chunk in chunks:
    grouped_chunk = chunk.groupby('category').mean()
    df_list.append(grouped_chunk)

# 处理完所有块后合并
final_df = pd.concat(df_list)
print(final_df)

使用 Dask,代码更简洁:

import dask.dataframe as dd

# 读取多个 CSV 文件,按类别分组,计算平均值并并行化操作
df = dd.read_csv('data*.csv').groupby('category').mean().compute()

# 输出结果
print(df)

10. PyAutoGUI

PyAutoGUI 可以模拟用户输入动作,自动完成重复性任务,比如填写表单。通过 PyAutoGUI,你可以编写脚本来执行一系列 GUI 操作,节省重复输入的时间。

示例

import pyautogui
import time

# 等待页面加载
time.sleep(3)

# 点击 'Name' 字段并输入姓名
pyautogui.click(x=300, y=400)  # Name 字段的坐标
pyautogui.write('John Doe')

# 点击 'Email' 字段并输入电子邮件
pyautogui.click(x=300, y=500)  # Email 字段的坐标
pyautogui.write('john@example.com')

# 点击 'Submit' 按钮
pyautogui.click(x=300, y=600)  # Submit 按钮的坐标

11. OpenCV

OpenCV 简化了复杂的图像处理任务,如裁剪、模糊、旋转图像等操作。

传统方法示例

import numpy as np
from PIL import Image

# 加载图像并转换为灰度
img = Image.open('image.jpg').convert('L')
img_array = np.array(img)

# 定义 Sobel 算子
sobel_x = np.array([[-1, 0, 1], [-2, 0, 2], [-1, 0, 1]])
sobel_y = np.array([[1, 2, 1], [0, 0, 0], [-1, -2, -1]])

# 手动应用 Sobel 算子
edges = np.zeros_like(img_array)

for i in range(1, rows-1):
    for j in range(1, cols-1):
        gx = np.sum(sobel_x * img_array[i-1:i+2, j-1:j+2])
        gy = np.sum(sobel_y * img_array[i-1:i+2, j-1:j+2])
        edges[i, j] = min(255, np.sqrt(gx**2 + gy**2))

使用 OpenCV,你可以用少量代码实现同样的边缘检测:

import cv2

# 加载图像
img = cv2.imread('image.jpg', 0)

# 使用 Canny 算法进行边缘检测
edges = cv2.Canny(img, 100, 200)

# 显示并保存结果
cv2.imshow('Edges', edges)
cv2.imwrite('edges_cv.jpg', edges)
cv2.waitKey(0)
cv2.destroyAllWindows()

相关推荐

最强聚类模型,层次聚类 !!_层次聚类的优缺点

哈喽,我是小白~咱们今天聊聊层次聚类,这种聚类方法在后面的使用,也是非常频繁的~首先,聚类很好理解,聚类(Clustering)就是把一堆“东西”自动分组。这些“东西”可以是人、...

python决策树用于分类和回归问题实际应用案例

决策树(DecisionTrees)通过树状结构进行决策,在每个节点上根据特征进行分支。用于分类和回归问题。实际应用案例:预测一个顾客是否会流失。决策树是一种基于树状结构的机器学习算法,用于解决分类...

Python教程(四十五):推荐系统-个性化推荐算法

今日目标o理解推荐系统的基本概念和类型o掌握协同过滤算法(用户和物品)o学会基于内容的推荐方法o了解矩阵分解和深度学习推荐o掌握推荐系统评估和优化技术推荐系统概述推荐系统是信息过滤系统,用于...

简单学Python——NumPy库7——排序和去重

NumPy数组排序主要用sort方法,sort方法只能将数值按升充排列(可以用[::-1]的切片方式实现降序排序),并且不改变原数组。例如:importnumpyasnpa=np.array(...

PyTorch实战:TorchVision目标检测模型微调完

PyTorch实战:TorchVision目标检测模型微调完整教程一、什么是微调(Finetuning)?微调(Finetuning)是指在已经预训练好的模型基础上,使用自己的数据对模型进行进一步训练...

C4.5算法解释_简述c4.5算法的基本思想

C4.5算法是ID3算法的改进版,它在特征选择上采用了信息增益比来解决ID3算法对取值较多的特征有偏好的问题。C4.5算法也是一种用于决策树构建的算法,它同样基于信息熵的概念。C4.5算法的步骤如下:...

Python中的数据聚类及可视化分析实践

探索如何通过聚类分析揭露糖尿病预测数据集的特征!我们将运用Python的强力工具,深入挖掘数据,以直观的可视化揭示不同特征间的关系。一同探索聚类分析在糖尿病预测中的实践!所有这些可视化都可以通过数据操...

用Python来统计大乐透号码的概率分布

用Python来统计大乐透号码的概率分布,可以按照以下步骤进行:导入所需的库:使用Python中的numpy库生成数字序列,使用matplotlib库生成概率分布图。读取大乐透历史数据:从网络上找到大...

python:支持向量机监督学习算法用于二分类和多分类问题示例

监督学习-支持向量机(SVM)支持向量机(SupportVectorMachine,简称SVM)是一种常用的监督学习算法,用于解决分类和回归问题。SVM的目标是找到一个最优的超平面,将不同类别的...

25个例子学会Pandas Groupby 操作

groupby是Pandas在数据分析中最常用的函数之一。它用于根据给定列中的不同值对数据点(即行)进行分组,分组后的数据可以计算生成组的聚合值。如果我们有一个包含汽车品牌和价格信息的数据集,那么可以...

数据挖掘流程_数据挖掘流程主要有哪些步骤

数据挖掘流程1.了解需求,确认目标说一下几点思考方法:做什么?目的是什么?目标是什么?为什么要做?有什么价值和意义?如何去做?完整解决方案是什么?2.获取数据pandas读取数据pd.read.c...

使用Python寻找图像最常见的颜色_python 以图找图

如果我们知道图像或对象最常见的是哪种颜色,那么可以解决图像处理中的几个用例,例如在农业领域,我们可能需要确定水果的成熟度。我们可以简单地检查一下水果的颜色是否在预定的范围内,看看它是成熟的,腐烂的,还...

财务预算分析全网最佳实践:从每月分析到每天分析

原文链接如下:「链接」掌握本文的方法,你就掌握了企业预算精细化分析的能力,全网首发。数据模拟稍微有点问题,不要在意数据细节,先看下最终效果。在编制财务预算或业务预算的过程中,通常预算的所有数据都是按月...

常用数据工具去重方法_数据去重公式

在数据处理中,去除重复数据是确保数据质量和分析准确性的关键步骤。特别是在处理多列数据时,保留唯一值组合能够有效清理数据集,避免冗余信息对分析结果的干扰。不同的工具和编程语言提供了多种方法来实现多列去重...

Python教程(四十):PyTorch深度学习-动态计算图

今日目标o理解PyTorch的基本概念和动态计算图o掌握PyTorch张量操作和自动求导o学会构建神经网络模型o了解PyTorch的高级特性o掌握模型训练和部署PyTorch概述PyTorc...