首页 > 编程语言 >Python 物联网入门指南(二)

Python 物联网入门指南(二)

时间:2024-04-16 15:58:55浏览次数:15  
标签:指南 入门 Python image cv2 TK 图像 import self

原文:zh.annas-archive.org/md5/4fe4273add75ed738e70f3d05e428b06

译者:飞龙

协议:CC BY-NC-SA 4.0

第三章:使用 Python 进行自动化和提高生产力

在本章中,我们将涵盖以下主题:

  • 使用 Tkinter 创建图形用户界面

  • 创建一个图形启动菜单应用程序

  • 在应用程序中显示照片信息

  • 自动整理您的照片

介绍

到目前为止,我们只专注于命令行应用程序;然而,树莓派不仅仅是命令行。通过使用图形用户界面GUI),通常更容易从用户那里获取输入并以更简单的方式提供反馈。毕竟,我们一直在不断处理多个输入和输出,所以为什么在不必要的情况下限制自己只使用命令行的程序格式呢?

幸运的是,Python 可以支持这一点。与其他编程语言(如 Visual Basic 和 C/C++/C#)类似,这可以通过使用提供标准控件的预构建对象来实现。我们将使用一个名为Tkinter的模块,它提供了一系列良好的控件(也称为小部件)和工具,用于创建图形应用程序。

首先,我们将以encryptdecrypt.py为例,演示可以编写和在各种方式中重复使用的有用模块。这是良好编码实践的一个例子。我们应该致力于编写可以进行彻底测试,然后在许多地方重复使用的代码。

接下来,我们将通过创建一个小型图形启动菜单应用程序来扩展我们之前的示例,以运行我们喜爱的应用程序。

然后,我们将探索在我们的应用程序中使用来显示,然后

整理照片。

使用 Tkinter 创建图形用户界面

我们将创建一个基本的 GUI,允许用户输入信息,然后程序可以用来加密和解密它。

准备工作

您必须确保该文件放置在相同的目录中。

由于我们使用了 Tkinter(Python 的许多可用附加组件之一),我们需要确保它已安装。它应该默认安装在标准的 Raspbian 镜像上。我们可以通过从 Python 提示符导入它来确认它已安装,如下所示:

Python3

>>> import tkinter

如果未安装,将引发ImportError异常,在这种情况下,您可以使用以下命令进行安装(使用Ctrl + Z退出 Python 提示符):

sudo apt-get install python3-tk

如果模块加载了,您可以使用以下命令来阅读有关模块的更多信息(完成阅读后使用Q退出):

>>>help(tkinter)

您还可以使用以下命令获取有关模块内所有类、函数和方法的信息:

>>>help(tkinter.Button)

以下dir命令将列出在module范围内的任何有效命令或变量:

>>>dir(tkinter.Button)

您将看到我们自己的模块将包含由三个引号标记的函数的信息;如果我们使用help命令,这将显示出来。

命令行将无法显示本章中创建的图形显示,因此您将需要启动树莓派桌面(使用startx命令),或者如果您是远程使用它。

确保您已启用X11 转发并且运行着X 服务器(参见第一章,使用树莓派 3 计算机入门)。

如何做...

我们将使用tkinter模块为encryptdecrypt.py脚本生成 GUI。

为了生成 GUI,我们将创建以下tkencryptdecrypt.py脚本:

#!/usr/bin/python3 
#tkencryptdecrypt.py 
import encryptdecrypt as ENC 
import tkinter as TK 

def encryptButton(): 
    encryptvalue.set(ENC.encryptText(encryptvalue.get(), 
                                     keyvalue.get())) 

def decryptButton(): 
    encryptvalue.set(ENC.encryptText(encryptvalue.get(), 
                                     -keyvalue.get())) 
#Define Tkinter application 
root=TK.Tk() 
root.title("Encrypt/Decrypt GUI") 
#Set control & test value 
encryptvalue = TK.StringVar() 
encryptvalue.set("My Message")  
keyvalue = TK.IntVar() 
keyvalue.set(20) 
prompt="Enter message to encrypt:" 
key="Key:" 

label1=TK.Label(root,text=prompt,width=len(prompt),bg='green') 
textEnter=TK.Entry(root,textvariable=encryptvalue, 
                   width=len(prompt)) 
encryptButton=TK.Button(root,text="Encrypt",command=encryptButton) 
decryptButton=TK.Button(root,text="Decrypt",command=decryptButton) 
label2=TK.Label(root,text=key,width=len(key)) 
keyEnter=TK.Entry(root,textvariable=keyvalue,width=8) 
#Set layout 
label1.grid(row=0,columnspan=2,sticky=TK.E+TK.W) 
textEnter.grid(row=1,columnspan=2,sticky=TK.E+TK.W) 
encryptButton.grid(row=2,column=0,sticky=TK.E) 
decryptButton.grid(row=2,column=1,sticky=TK.W) 
label2.grid(row=3,column=0,sticky=TK.E) 
keyEnter.grid(row=3,column=1,sticky=TK.W) 

TK.mainloop() 
#End 

使用以下命令运行脚本:

python3 tkencryptdecrypt

它是如何工作的...

我们首先导入两个模块;第一个是我们自己的encryptdecrypt模块,第二个是tkinter模块。为了更容易看到哪些项目来自哪里,我们使用ENC/TK。如果您想避免额外的引用,您可以使用from <module_name> import *直接引用模块项目。

当我们点击加密和解密按钮时,将调用encryptButton()decryptButton()函数;它们将在以下部分中解释。

使用Tk()命令创建主 Tkinter 窗口,该命令返回所有小部件/控件可以放置的主窗口。

我们将定义六个控件如下:

  • Label:这显示了加密消息的提示输入信息:

  • Entry:这提供了一个文本框来接收用户要加密的消息

  • Button:这是一个加密按钮,用于触发要加密的消息

  • Button:这是一个解密按钮,用于反转加密

  • Label:这显示了密钥:字段以提示用户输入加密密钥值

  • Entry:这提供了第二个文本框来接收加密密钥的值

这些控件将产生一个类似于以下截图所示的 GUI:

加密/解密消息的 GUI

让我们来看一下第一个label1的定义:

label1=TK.Label(root,text=prompt,width=len(prompt),bg='green') 

所有控件必须链接到应用程序窗口;因此,我们必须指定我们的 Tkinter 窗口root。标签使用的文本由text设置;在这种情况下,我们将其设置为一个名为prompt的字符串,该字符串已经在之前定义了我们需要的文本。我们还设置width以匹配消息的字符数(虽然不是必需的,但如果我们稍后向标签添加更多文本,它会提供更整洁的结果),最后,我们使用bg='green'设置背景颜色。

接下来,我们为我们的消息定义文本Entry框:

textEnter=TK.Entry(root,textvariable=encryptvalue, 
                   width=len(prompt)) 

我们将定义textvariable——将一个变量链接到框的内容的一种有用的方式,这是一个特殊的字符串变量。我们可以直接使用textEnter.get()访问text,但我们将使用一个Tkinter StringVar()对象来间接访问它。如果需要,这将允许我们将正在处理的数据与处理 GUI 布局的代码分开。enycrptvalue变量在使用.set()命令时会自动更新它所链接到的Entry小部件(并且.get()命令会从Entry小部件获取最新的值)。

接下来,我们有两个Button小部件,加密和解密,如下所示:

encryptButton=TK.Button(root,text="Encrypt",command=encryptButton) 
decryptButton=TK.Button(root,text="Decrypt",command=decryptButton) 

在这种情况下,我们可以设置一个函数,当点击Button小部件时调用该函数,方法是设置command属性。我们可以定义两个函数,当每个按钮被点击时将被调用。在以下代码片段中,我们有encryptButton()函数,它将设置控制第一个Entry框内容的encryptvalue StringVar。这个字符串被设置为我们通过调用ENC.encryptText()得到的结果,我们要加密的消息(encryptvalue的当前值)和keyvalue变量。decrypt()函数完全相同,只是我们将keyvalue变量设置为负数以解密消息:

def encryptButton(): 
    encryptvalue.set(ENC.encryptText(encryptvalue.get(), 
                                     keyvalue.get())) 

然后我们以类似的方式设置最终的LabelEntry小部件。请注意,如果需要,textvariable也可以是整数(数值),但没有内置检查来确保只能输入数字。当使用.get()命令时,会遇到ValueError异常。

在我们定义了 Tkinter 窗口中要使用的所有小部件之后,我们必须设置布局。在 Tkinter 中有三种定义布局的方法:placepackgrid

place 布局允许我们使用精确的像素位置指定位置和大小。pack 布局按照它们被添加的顺序将项目放置在窗口中。grid 布局允许我们以特定的布局放置项目。建议尽量避免使用 place 布局,因为对一个项目进行任何小的更改都可能对窗口中所有其他项目的位置和大小产生连锁效应;其他布局通过确定它们相对于窗口中其他项目的位置来解决这个问题。

我们将按照以下截图中的布局放置这些项目:

加密/解密 GUI 的网格布局

使用以下代码设置 GUI 中前两个项目的位置:

label1.grid(row=0,columnspan=2,sticky= TK.E+TK.W) 
textEnter.grid(row=1,columnspan=2,sticky= TK.E+TK.W) 

我们可以指定第一个LabelEntry框将跨越两列(columnspan=2),并且我们可以设置粘性值以确保它们跨越整个宽度。这是通过设置TK.E表示东边和TK.W表示西边来实现的。如果需要在垂直方向上做同样的操作,我们会使用TK.N表示北边和TK.S表示南边。如果未指定column值,grid函数会默认为column=0。其他项目也是类似定义的。

最后一步是调用TK.mainloop(),这允许 Tkinter 运行;这允许监视按钮点击并调用与它们链接的函数。

创建图形应用程序-开始菜单

本示例显示了如何定义我们自己的 Tkinter 对象的变体,以生成自定义控件并动态构建菜单。我们还将简要介绍使用线程来允许其他任务继续运行,同时执行特定任务。

准备工作

要查看 GUI 显示,您需要一个显示树莓派桌面的显示器,或者您需要连接到另一台运行 X 服务器的计算机。

如何做...

  1. 要创建图形开始菜单应用程序,请创建以下graphicmenu.py脚本:
#!/usr/bin/python3 
# graphicmenu.py 
import tkinter as tk 
from subprocess import call 
import threading 

#Define applications ["Display name","command"] 
leafpad = ["Leafpad","leafpad"] 
scratch = ["Scratch","scratch"] 
pistore = ["Pi Store","pistore"] 
app_list = [leafpad,scratch,pistore] 
APP_NAME = 0 
APP_CMD  = 1 

class runApplictionThread(threading.Thread): 
    def __init__(self,app_cmd): 
        threading.Thread.__init__(self) 
        self.cmd = app_cmd 
    def run(self): 
        #Run the command, if valid 
        try: 
            call(self.cmd) 
        except: 
            print ("Unable to run: %s" % self.cmd) 

class appButtons: 
    def __init__(self,gui,app_index): 
        #Add the buttons to window 
        btn = tk.Button(gui, text=app_list[app_index][APP_NAME], 
                        width=30, command=self.startApp) 
        btn.pack() 
        self.app_cmd=app_list[app_index][APP_CMD] 
    def startApp(self): 
        print ("APP_CMD: %s" % self.app_cmd) 
        runApplictionThread(self.app_cmd).start()        

root = tk.Tk() 
root.title("App Menu") 
prompt = '      Select an application      ' 
label1 = tk.Label(root, text=prompt, width=len(prompt), bg='green') 
label1.pack() 
#Create menu buttons from app_list 
for index, app in enumerate(app_list): 
    appButtons(root,index) 
#Run the tk window 
root.mainloop() 
#End
  1. 上面的代码产生了以下应用程序:

应用程序菜单 GUI

它是如何工作的...

我们创建 Tkinter 窗口与之前一样;但是,我们不是单独定义所有项目,而是为应用程序按钮创建一个特殊的类。

我们创建的类充当了appButtons项目要包含的蓝图或规范。每个项目将包括一个app_cmd的字符串值,一个名为startApp()的函数和一个__init__()函数。__init__()函数是一个特殊函数(称为构造函数),当我们创建一个appButtons项目时会调用它;它将允许我们创建任何所需的设置。

在这种情况下,__init__()函数允许我们创建一个新的 Tkinter 按钮,其中文本设置为app_list中的一个项目,当点击按钮时调用startApp()函数。使用self关键字是为了调用属于该项目的命令;这意味着每个按钮将调用一个具有访问该项目的本地数据的本地定义函数。

我们将self.app_cmd的值设置为app_list中的命令,并通过startApp()函数准备好使用。现在我们创建startApp()函数。如果我们直接在这里运行应用程序命令,Tkinter 窗口将会冻结,直到我们打开的应用程序再次关闭。为了避免这种情况,我们可以使用 Python 线程模块,它允许我们同时执行多个操作。

runApplicationThread()类是使用threading.Thread类作为模板创建的——这个类继承了threading.Thread类的所有特性。和之前的类一样,我们也为这个类提供了__init__()函数。我们首先调用继承类的__init__()函数以确保它被正确设置,然后我们将app_cmd的值存储在self.cmd中。创建并初始化runApplicationThread()函数后,调用start()函数。这个函数是threading.Thread的一部分,我们的类可以使用它。当调用start()函数时,它将创建一个单独的应用程序线程(也就是说,模拟同时运行两个任务),允许 Tkinter 在执行类中的run()函数时继续监视按钮点击。

因此,我们可以将代码放在run()函数中来运行所需的应用程序(使用call(self.cmd))。

还有更多...

使 Python 特别强大的一个方面是它支持面向对象设计OOD)中使用的编程技术。这是现代编程语言常用的一种技术,用来帮助将我们希望程序执行的任务转化为代码中有意义的构造和结构。OOD 的原则在于,我们认为大多数问题都由几个对象(GUI 窗口、按钮等)组成,它们相互交互以产生期望的结果。

在前一节中,我们发现可以使用类来创建可以多次重复使用的唯一对象。我们创建了一个appButton类,它生成了一个具有该类所有功能的对象,包括其自己的app_cmd版本,该版本将被startApp()函数使用。appButton类型的另一个对象将有其自己不相关的[app_cmd]数据,其startApp()函数将使用它。

你可以看到,类对于将一组相关的变量和函数集中在一个对象中非常有用,而且类将在一个地方保存它自己的数据。拥有同一类型(类)的多个对象,每个对象内部都有自己的函数和数据,会导致更好的程序结构。传统的方法是将所有信息保存在一个地方,然后来回发送每个项目以供各种函数处理;然而,在大型系统中,这可能变得繁琐。

下图显示了相关函数和数据的组织结构:

数据和函数

到目前为止,我们已经使用 Python 模块将程序的不同部分分开。

文件;这使我们能够在概念上将程序的不同部分分开(界面、编码器/解码器或类库,比如 Tkinter)。模块可以提供控制特定硬件的代码,定义互联网接口,或提供常用功能的类库;然而,它最重要的功能是控制接口(在导入项目时可用的函数、变量和类的集合)。一个良好实现的模块应该有一个清晰的接口,其重点是围绕它的使用方式,而不是它的实现方式。这使你能够创建多个可以轻松交换和更改的模块,因为它们共享相同的接口。在我们之前的例子中,想象一下,通过支持encryptText(input_text,key),要将encryptdecrypt模块更改为另一个模块是多么容易。复杂的功能可以分解成更小、可管理的块,可以在多个应用程序中重复使用。

Python 一直在使用类和模块。每次你导入一个库,比如sys或 Tkinter,或者使用value.str()转换一个值,或者使用for...in遍历一个列表,你都可以在不用担心细节的情况下使用它们。你不必在你写的每一行代码中都使用类或模块,但它们是你程序员工具箱中有用的工具,适合你正在做的事情时使用。

通过在本书的示例中使用类和模块,我们将了解它们如何使我们能够生成结构良好、易于测试和维护的代码。

在应用程序中显示照片信息

在这个例子中,我们将创建一个实用类来处理照片,其他应用程序(作为模块)可以使用它来访问照片元数据并轻松显示预览图像。

准备就绪

以下脚本使用了Python Image LibraryPIL);Python 3 的兼容版本是Pillow

Pillow 没有包含在 Raspbian 仓库中(由apt-get使用);因此,我们需要使用名为PIPPython 包管理器来安装 Pillow。

要为 Python 3 安装包,我们将使用 Python 3 版本的 PIP(这需要 50MB 的可用空间)。

以下命令可用于安装 PIP:

sudo apt-get update
sudo apt-get install python3-pip 

在使用 PIP 之前,请确保已安装libjpeg-dev以允许 Pillow 处理 JPEG 文件。您可以使用以下命令执行此操作:

sudo apt-get install libjpeg-dev

现在您可以使用以下 PIP 命令安装 Pillow:

sudo pip-3.2 install pillow  

PIP 还可以通过使用uninstall而不是install来轻松卸载软件包。

最后,您可以通过运行python3来确认它已成功安装:

>>>import PIL
>>>help(PIL)  

您不应该收到任何错误,并且应该看到有关 PIL 及其用途的大量信息(按Q键完成)。按照以下方式检查安装的版本:

>>PIL.PILLOW_VERSION

您应该看到2.7.0(或类似)。

通过使用以下命令安装 pip-2.x,PIP 也可以与 Python 2 一起使用:

   sudo apt-get install python-pip

使用sudo pip install安装的任何软件包都将仅为 Python 2 安装。

如何做...

要在应用程序中显示照片信息,请创建以下photohandler.py脚本:

##!/usr/bin/python3 
#photohandler.py 
from PIL import Image 
from PIL import ExifTags 
import datetime 
import os 

#set module values 
previewsize=240,240 
defaultimagepreview="./preview.ppm" 
filedate_to_use="Exif DateTime" 
#Define expected inputs 
ARG_IMAGEFILE=1 
ARG_LENGTH=2 

class Photo: 
    def __init__(self,filename): 
        """Class constructor""" 
        self.filename=filename 
        self.filevalid=False 
        self.exifvalid=False 
        img=self.initImage() 
        if self.filevalid==True: 
            self.initExif(img) 
            self.initDates() 

    def initImage(self): 
        """opens the image and confirms if valid, returns Image""" 
        try: 
            img=Image.open(self.filename) 
            self.filevalid=True 
        except IOError: 
            print ("Target image not found/valid %s" % 
                   (self.filename)) 
            img=None 
            self.filevalid=False 
        return img 

    def initExif(self,image): 
        """gets any Exif data from the photo""" 
        try: 
            self.exif_info={ 
                ExifTags.TAGS[x]:y 
                for x,y in image._getexif().items() 
                if x in ExifTags.TAGS 
            } 
            self.exifvalid=True 
        except AttributeError: 
            print ("Image has no Exif Tags") 
            self.exifvalid=False 

    def initDates(self): 
        """determines the date the photo was taken""" 
        #Gather all the times available into YYYY-MM-DD format 
        self.filedates={} 
        if self.exifvalid: 
            #Get the date info from Exif info 
            exif_ids=["DateTime","DateTimeOriginal", 
                      "DateTimeDigitized"] 
            for id in exif_ids: 
                dateraw=self.exif_info[id] 
                self.filedates["Exif "+id]= 
                                dateraw[:10].replace(":","-") 
        modtimeraw = os.path.getmtime(self.filename) 
        self.filedates["File ModTime"]="%s" % 
            datetime.datetime.fromtimestamp(modtimeraw).date() 
        createtimeraw = os.path.getctime(self.filename) 
        self.filedates["File CreateTime"]="%s" % 
            datetime.datetime.fromtimestamp(createtimeraw).date() 

    def getDate(self): 
        """returns the date the image was taken""" 
        try: 
            date = self.filedates[filedate_to_use] 
        except KeyError: 
            print ("Exif Date not found") 
            date = self.filedates["File ModTime"] 
        return date 

    def previewPhoto(self): 
        """creates a thumbnail image suitable for tk to display""" 
        imageview=self.initImage() 
        imageview=imageview.convert('RGB') 
        imageview.thumbnail(previewsize,Image.ANTIALIAS) 
        imageview.save(defaultimagepreview,format='ppm') 
        return defaultimagepreview         

前面的代码定义了我们的Photo类;在还有更多...部分和下一个示例中运行它之前,它对我们没有用处。

它是如何工作的...

我们定义了一个名为Photo的通用类;它包含有关自身的详细信息,并提供

用于访问可交换图像文件格式EXIF)信息并生成的函数

一个预览图像。

__init__()函数中,我们为我们的类变量设置值,并调用self.initImage(),它将使用 PIL 中的Image()函数打开图像。然后我们调用self.initExif()self.initDates(),并设置一个标志来指示文件是否有效。如果无效,Image()函数将引发IOError异常。

initExif()函数使用 PIL 从img对象中读取 EXIF 数据,如下面的代码片段所示:

self.exif_info={ 
                ExifTags.TAGS[id]:y 
                for id,y in image._getexif().items() 
                if id in ExifTags.TAGS 
               } 

前面的代码是一系列复合语句,导致self.exif_info被填充为标签名称及其相关值的字典。

ExifTag.TAGS是一个包含可能的标签名称及其 ID 的列表的字典,如下面的代码片段所示:

ExifTag.TAGS={ 
4096: 'RelatedImageFileFormat', 
513: 'JpegIFOffset', 
514: 'JpegIFByteCount', 
40963: 'ExifImageHeight', 
...etc...}

image._getexif()函数返回一个包含图像相机设置的所有值的字典,每个值都与其相关的 ID 链接,如下面的代码片段所示:

Image._getexif()={ 
256: 3264, 
257: 2448, 
37378: (281, 100), 
36867: '2016:09:28 22:38:08', 
...etc...} 

for循环将遍历图像的 EXIF 值字典中的每个项目,并检查其在ExifTags.TAGS字典中的出现;结果将存储在self.exif_info中。其代码如下:

self.exif_info={ 
'YResolution': (72, 1), 
 'ResolutionUnit': 2, 
 'ExposureMode': 0,  
'Flash': 24, 
...etc...} 

再次,如果没有异常,我们将设置一个标志来指示 EXIF 数据是有效的,或者如果没有 EXIF 数据,我们将引发AttributeError异常。

initDates()函数允许我们收集所有可能的文件日期和来自 EXIF 数据的日期,以便我们可以选择其中一个作为我们希望用于文件的日期。例如,它允许我们将所有图像重命名为标准日期格式的文件名。我们创建一个self.filedates字典,其中包含从 EXIF 信息中提取的三个日期。然后添加文件系统日期(创建和修改),以防没有 EXIF 数据可用。os模块允许我们使用os.path.getctime()os.path.getmtime()来获取文件创建的时期值。它也可以是文件移动时的日期和时间-最后写入的文件修改时间(例如,通常指图片拍摄的日期)。时期值是自 1970 年 1 月 1 日以来的秒数,但我们可以使用datetime.datetime.fromtimestamp()将其转换为年、月、日、小时和秒。添加date()只是将其限制为年、月和日。

现在,如果Photo类被另一个模块使用,并且我们希望知道拍摄的图像的日期,我们可以查看self.dates字典并选择合适的日期。但是,这将要求程序员知道self.dates值的排列方式,如果以后更改了它们的存储方式,将会破坏他们的程序。因此,建议我们通过访问函数访问类中的数据,以便实现独立于接口(这个过程称为封装)。我们提供一个在调用时返回日期的函数;程序员不需要知道它可能是五个可用日期中的一个,甚至不需要知道它们是作为时期值存储的。使用函数,我们可以确保接口保持不变,无论数据的存储或收集方式如何。

最后,我们希望Photo类提供的最后一个函数是previewPhoto()。此函数提供了一种生成小缩略图图像并将其保存为便携式像素图格式(PPM)文件的方法。正如我们将在一会儿发现的那样,Tkinter 允许我们将图像放在其Canvas小部件上,但不幸的是,它不直接支持 JPEG,只支持 GIF 或 PPM。因此,我们只需将要显示的图像的小副本保存为 PPM 格式,然后让 Tkinter 在需要时将其加载到Canvas上。

总之,我们创建的Photo类如下:

操作 描述
__init__(self,filename) 这是对象初始化程序。
initImage(self) 这将返回img,一个 PIL 类型的图像对象。
initExif(self,image) 如果存在,这将提取所有的 EXIF 信息。
initDates(self) 这将创建一个包含文件和照片信息中所有可用日期的字典。
getDate(self) 这将返回照片拍摄/创建的日期的字符串。
previewPhoto(self) 这将返回预览缩略图的文件名的字符串。

属性及其相应的描述如下:

属性 描述
self.filename 照片的文件名。
self.filevalid 如果文件成功打开,则设置为True
self.exifvalid 如果照片包含 EXIF 信息,则设置为True
self.exif_info 这包含照片的 EXIF 信息。
self.filedates 这包含了文件和照片信息中可用日期的字典。

为了测试新类,我们将创建一些测试代码来确认一切是否按我们的预期工作;请参阅以下部分。

还有更多...

我们之前创建了Photo类。现在我们可以向我们的模块中添加一些测试代码,以确保它按我们的预期运行。我们可以使用__name__ ="__main__"属性

与之前一样,以检测模块是否直接运行。

我们可以在photohandler.py脚本的末尾添加以下代码段,以生成以下测试应用程序,其外观如下:

照片查看演示应用程序

photohandler.py的末尾添加以下代码:

#Module test code 
def dispPreview(aPhoto): 
    """Create a test GUI""" 
    import tkinter as TK 

    #Define the app window 
    app = TK.Tk() 
    app.title("Photo View Demo") 

    #Define TK objects 
    # create an empty canvas object the same size as the image 
    canvas = TK.Canvas(app, width=previewsize[0], 
                       height=previewsize[1]) 
    canvas.grid(row=0,rowspan=2) 
    # Add list box to display the photo data 
    #(including xyscroll bars) 
    photoInfo=TK.Variable() 
    lbPhotoInfo=TK.Listbox(app,listvariable=photoInfo, 
                           height=18,width=45, 
                           font=("monospace",10)) 
    yscroll=TK.Scrollbar(command=lbPhotoInfo.yview, 
                         orient=TK.VERTICAL) 
    xscroll=TK.Scrollbar(command=lbPhotoInfo.xview, 
                         orient=TK.HORIZONTAL) 
    lbPhotoInfo.configure(xscrollcommand=xscroll.set, 
                          yscrollcommand=yscroll.set) 
    lbPhotoInfo.grid(row=0,column=1,sticky=TK.N+TK.S) 
    yscroll.grid(row=0,column=2,sticky=TK.N+TK.S) 
    xscroll.grid(row=1,column=1,sticky=TK.N+TK.E+TK.W) 

    # Generate the preview image 
    preview_filename = aPhoto.previewPhoto() 
    photoImg = TK.PhotoImage(file=preview_filename) 
    # anchor image to NW corner 
    canvas.create_image(0,0, anchor=TK.NW, image=photoImg)  

    # Populate infoList with dates and exif data 
    infoList=[] 
    for key,value in aPhoto.filedates.items(): 
        infoList.append(key.ljust(25) + value) 
    if aPhoto.exifvalid: 
        for key,value in aPhoto.exif_info.items(): 
           infoList.append(key.ljust(25) + str(value)) 
    # Set listvariable with the infoList 
    photoInfo.set(tuple(infoList)) 

    app.mainloop() 

def main(): 
    """called only when run directly, allowing module testing""" 
    import sys 
    #Check the arguments 
    if len(sys.argv) == ARG_LENGTH: 
        print ("Command: %s" %(sys.argv)) 
        #Create an instance of the Photo class 
        viewPhoto = Photo(sys.argv[ARG_IMAGEFILE]) 
        #Test the module by running a GUI 
        if viewPhoto.filevalid==True: 
            dispPreview(viewPhoto) 
    else: 
        print ("Usage: photohandler.py imagefile") 

if __name__=='__main__': 
  main() 
#End 

之前的测试代码将运行main()函数,该函数获取要使用的照片的文件名,并创建一个名为viewPhoto的新Photo对象。如果viewPhoto成功打开,我们将调用dispPreview()来显示图像及其详细信息。

dispPreview()函数创建四个 Tkinter 小部件以显示:一个Canvas加载缩略图图像,一个Listbox小部件显示照片信息,以及两个滚动条来控制Listbox。首先,我们创建一个Canvas小部件,大小与缩略图图像(previewsize)相同。

接下来,我们创建photoInfo,它将是我们与Listbox小部件关联的listvariable参数。由于 Tkinter 没有提供ListVar()函数来创建合适的项目,我们使用通用类型TK.Variable(),然后确保在设置值之前将其转换为元组类型。添加Listbox小部件;我们需要确保listvariable参数设置为photoInfo,并且将字体设置为monospace。这将允许我们使用空格对齐我们的数据值,因为monospace是等宽字体,所以每个字符占用的宽度都相同。

我们通过将Scrollbar命令参数设置为lbPhotoInfo.yviewlbPhotoInfo.xview来定义两个滚动条,并将它们链接到Listbox小部件。然后,我们使用以下命令调整Listbox的参数:

lbPhotoInfo.configure(xscrollcommand=xscroll.set, 
 yscrollcommand=yscroll.set)

configure命令允许我们在创建小部件后添加或更改小部件的参数,在这种情况下,链接两个滚动条,以便Listbox小部件在用户在列表中滚动时也可以控制它们。

与以前一样,我们利用网格布局来确保Listbox小部件旁边正确放置了两个滚动条,Canvas小部件位于Listbox小部件的左侧。

我们现在使用Photo对象创建preview.ppm缩略图文件(使用aPhoto.previewPhoto()函数),并创建一个TK.PhotoImage对象,然后可以使用以下命令将其添加到Canvas小部件中:

canvas.create_image(0,0, anchor=TK.NW, image=photoImg)

最后,我们使用Photo类收集的日期信息和 EXIF 信息(确保它首先是有效的)来填充Listbox小部件。我们通过将每个项目转换为一系列使用.ljust(25)间隔的字符串来实现这一点——它添加左对齐到名称,并填充它使字符串宽度为 25 个字符。一旦我们有了列表,我们将其转换为元组类型并设置listvariablephotoInfo)参数。

像往常一样,我们调用app.mainloop()来开始监视事件以做出响应。

自动整理您的照片

现在我们有了一个允许我们收集照片信息的类,我们可以将这些信息应用于执行有用的任务。在这种情况下,我们将使用文件信息自动将一个充满照片的文件夹组织成基于照片拍摄日期的子文件夹的子集。

以下屏幕截图显示了脚本的输出:

脚本输出以整理文件夹中的照片

准备工作

您需要在树莓派上的一个文件夹中放置一些照片。或者,您可以插入一个带有照片的 USB 存储设备或读卡器——它们将位于/mnt/中。但是,请确保您首先使用照片的副本测试脚本,以防出现任何问题。

如何做...

创建以下脚本filehandler.py以自动整理您的照片:

#!/usr/bin/python3 
#filehandler.py 
import os 
import shutil 
import photohandler as PH 
from operator import itemgetter 

FOLDERSONLY=True 
DEBUG=True 
defaultpath="" 
NAME=0 
DATE=1 

class FileList: 
  def __init__(self,folder): 
    """Class constructor""" 
    self.folder=folder 
    self.listFileDates() 

  def getPhotoNamedates(self): 
    """returns the list of filenames and dates""" 
    return self.photo_namedates 

  def listFileDates(self): 
    """Generate list of filenames and dates""" 
    self.photo_namedates = list() 
    if os.path.isdir(self.folder): 
      for filename in os.listdir(self.folder): 
        if filename.lower().endswith(".jpg"): 
          aPhoto = PH.Photo(os.path.join(self.folder,filename)) 
          if aPhoto.filevalid: 
            if (DEBUG):print("NameDate: %s %s"% 
                             (filename,aPhoto.getDate())) 
            self.photo_namedates.append((filename, 
                                         aPhoto.getDate())) 
            self.photo_namedates = sorted(self.photo_namedates, 
                                    key=lambda date: date[DATE]) 

  def genFolders(self): 
    """function to generate folders""" 
    for i,namedate in enumerate(self.getPhotoNamedates()): 
      #Remove the - from the date format 
      new_folder=namedate[DATE].replace("-","") 
      newpath = os.path.join(self.folder,new_folder) 
      #If path does not exist create folder 
      if not os.path.exists(newpath): 
        if (DEBUG):print ("New Path: %s" % newpath) 
        os.makedirs(newpath) 
      if (DEBUG):print ("Found file: %s move to %s" % 
                        (namedate[NAME],newpath)) 
      src_file = os.path.join(self.folder,namedate[NAME]) 
      dst_file = os.path.join(newpath,namedate[NAME]) 
      try: 
        if (DEBUG):print ("File moved %s to %s" % 
                          (src_file, dst_file)) 
        if (FOLDERSONLY==False):shutil.move(src_file, dst_file) 
      except IOError: 
        print ("Skipped: File not found") 

def main(): 
  """called only when run directly, allowing module testing""" 
  import tkinter as TK 
  from tkinter import filedialog 
  app = TK.Tk() 
  app.withdraw() 
  dirname = TK.filedialog.askdirectory(parent=app, 
      initialdir=defaultpath, 
      title='Select your pictures folder') 
  if dirname != "": 
    ourFileList=FileList(dirname) 
    ourFileList.genFolders() 

if __name__=="__main__": 
  main() 
#End 

它是如何工作的...

我们将创建一个名为FileList的类;它将使用Photo类来管理

特定文件夹中的照片。这有两个主要步骤:首先需要找到文件夹中的所有图像,然后生成一个包含文件名和照片日期的列表。我们将使用这些信息生成新的子文件夹,并将照片移动到这些文件夹中。

当我们创建FileList对象时,我们将使用listFileDates()创建列表。然后,我们将确认提供的文件夹是有效的,并使用os.listdir获取目录中的所有文件的完整列表。我们将检查每个文件是否是 JPEG 文件,并获取每张照片的日期(使用Photo类中定义的函数)。接下来,我们将文件名和日期作为元组添加到self.photo_namedates列表中。

最后,我们将使用内置的 sorted 函数按日期顺序放置所有文件。虽然我们在这里不需要这样做,但如果我们在其他地方使用这个模块,这个函数将更容易删除重复的日期。

sorted 函数需要对列表进行排序,在这种情况下,我们希望按 date values: 进行排序。

   sorted(self.photo_namedates,key=lambda date: date[DATE])

我们将用 lambda date: 替换 date[DATE] 作为排序的数值。

一旦 FileList 对象被初始化,我们可以通过调用 genFolders() 来使用它。首先,我们将日期文本转换为适合我们文件夹的格式(YYYYMMDD),使我们的文件夹可以轻松按日期顺序排序。接下来,它将在当前目录内创建文件夹(如果尚不存在)。最后,它将把每个文件移动到所需的子文件夹中。

我们最终得到了准备测试的 FileList 类:

操作 描述
__init__(self,folder) 这是对象初始化程序。
getPhotoNamedates(self) 这将返回一个包含照片文件名和日期的列表。
listFileDates(self) 这将创建一个包含文件夹中照片文件名和日期的列表。
genFolders(self) 这将根据照片的日期创建新文件夹并将文件移动到其中。

属性列如下:

属性 描述
self.folder 我们正在处理的文件夹。
self.photo_namedates 这包含文件名和日期的列表。

FileList 类将所有函数和相关数据封装在一起,将所有内容放在一个逻辑位置:

Tkinter filediaglog.askdirectory() 用于选择照片目录

为了测试这个,我们使用 Tkinter 的 filedialog.askdirectory() 小部件来选择照片的目标文件夹。我们使用 app.withdrawn() 来隐藏主 Tkinter 窗口,因为这次不需要它。我们只需要创建一个新的 FileList 对象,然后调用 genFolders() 将所有照片移动到新的位置!

在这个脚本中定义了两个额外的标志,为测试提供了额外的控制。DEBUG 允许我们通过将其设置为 TrueFalse 来启用或禁用额外的调试消息。此外,FOLDERSONLY 当设置为 True 时,只生成文件夹而不移动文件(这对于测试新的子文件夹是否正确非常有帮助)。

运行脚本后,您可以检查所有文件夹是否已正确创建。最后,将 FOLDERSONLY 更改为 True,下次您的程序将根据日期自动移动和组织照片。建议您只在照片的副本上运行此操作,以防出现错误。

第四章:预测词语中的情感

本章介绍以下主题:

  • 构建朴素贝叶斯分类器

  • 逻辑回归分类器

  • 将数据集分割为训练集和测试集

  • 使用交叉验证评估准确性

  • 分析一个句子的情感

  • 使用主题建模识别文本中的模式

  • 情感分析的应用

构建朴素贝叶斯分类器

朴素贝叶斯分类器使用贝叶斯定理构建监督模型。

如何做...

  1. 导入以下软件包:
from sklearn.naive_bayes import GaussianNB
import numpy as np
import matplotlib.pyplot as plt
  1. 使用以下包含逗号分隔的算术数据的数据文件:
in_file = 'data_multivar.txt'
a = []
b = []
with open(in_file, 'r') as f:
  for line in f.readlines():
    data = [float(x) for x in line.split(',')]
    a.append(data[:-1])
    b.append(data[-1])
a = np.array(a)
b = np.array(b)
  1. 构建朴素贝叶斯分类器:
classification_gaussiannb = GaussianNB()
classification_gaussiannb.fit(a, b)
b_pred = classification_gaussiannb.predict(a)
  1. 计算朴素贝叶斯的准确性:
correctness = 100.0 * (b == b_pred).sum() / a.shape[0]
print "correctness of the classification =", round(correctness, 2), "%"
  1. 绘制分类器结果:
def plot_classification(classification_gaussiannb, a , b):
  a_min, a_max = min(a[:, 0]) - 1.0, max(a[:, 0]) + 1.0
  b_min, b_max = min(a[:, 1]) - 1.0, max(a[:, 1]) + 1.0
  step_size = 0.01
  a_values, b_values = np.meshgrid(np.arange(a_min, a_max,   step_size), np.arange(b_min, b_max, step_size))
  mesh_output1 = classification_gaussiannb.predict(np.c_[a_values.ravel(), b_values.ravel()])
  mesh_output2 = mesh_output1.reshape(a_values.shape)
  plt.figure()
  plt.pcolormesh(a_values, b_values, mesh_output2, cmap=plt.cm.gray)
  plt.scatter(a[:, 0], a[:, 1], c=b , s=80, edgecolors='black', linewidth=1,cmap=plt.cm.Paired)
  1. 指定图的边界:
plt.xlim(a_values.min(), a_values.max())
plt.ylim(b_values.min(), b_values.max())
*# specify the ticks on the X and Y axes* plt.xticks((np.arange(int(min(a[:, 0])-1), int(max(a[:, 0])+1), 1.0)))
plt.yticks((np.arange(int(min(a[:, 1])-1), int(max(a[:, 1])+1), 1.0)))
plt.show()
plot_classification(classification_gaussiannb, a, b)

执行朴素贝叶斯分类器后获得的准确性如下截图所示:

另请参阅

请参考以下文章:

  • 要了解分类器如何工作的示例,请参考以下链接:

en.wikipedia.org/wiki/Naive_Bayes_classifier

  • 要了解更多关于使用提议的分类器进行文本分类的信息,请参考以下链接:

sebastianraschka.com/Articles/2014_naive_bayes_1.html

  • 要了解更多关于朴素贝叶斯分类算法的信息,请参考以下链接:

software.ucv.ro/~cmihaescu/ro/teaching/AIR/docs/Lab4-NaiveBayes.pdf

逻辑回归分类器

可以选择这种方法,其中输出只能取两个值,0 或 1,通过/失败,赢/输,活着/死亡,健康/生病等。在因变量有两个以上的结果类别的情况下,可以使用多项逻辑回归进行分析。

如何做...

  1. 安装必要的软件包后,让我们构建一些训练标签:
import numpy as np
from sklearn import linear_model
import matplotlib.pyplot as plt
a = np.array([[-1, -1], [-2, -1], [-3, -2], [1, 1], [2, 1], [3, 2]])
b = np.array([1, 1, 1, 2, 2, 2])
  1. 初始化分类器:
classification = linear_model.LogisticRegression(solver='liblinear', C=100)
classification.fit(a, b)
  1. 绘制数据点和边界:
def plot_classification(classification, a , b):
  a_min, a_max = min(a[:, 0]) - 1.0, max(a[:, 0]) + 1.0
  b_min, b_max = min(a[:, 1]) - 1.0, max(a[:, 1]) + 1.0 step_size = 0.01
  a_values, b_values = np.meshgrid(np.arange(a_min, a_max, step_size), np.arange(b_min, b_max, step_size))
  mesh_output1 = classification.predict(np.c_[a_values.ravel(), b_values.ravel()])
  mesh_output2 = mesh_output1.reshape(a_values.shape)
  plt.figure()
  plt.pcolormesh(a_values, b_values, mesh_output2, cmap=plt.cm.gray)
  plt.scatter(a[:, 0], a[:, 1], c=b , s=80, edgecolors='black',linewidth=1,cmap=plt.cm.Paired)
 # specify the boundaries of the figure  plt.xlim(a_values.min(), a_values.max())
  plt.ylim(b_values.min(), b_values.max())
 # specify the ticks on the X and Y axes  plt.xticks((np.arange(int(min(a[:, 0])-1), int(max(a[:, 0])+1), 1.0)))
  plt.yticks((np.arange(int(min(a[:, 1])-1), int(max(a[:, 1])+1), 1.0)))
  plt.show()
  plot_classification(classification, a, b)

执行逻辑回归的命令如下截图所示:

将数据集分割为训练集和测试集

分割有助于将数据集分割为训练和测试序列。

如何做...

  1. 将以下代码片段添加到同一个 Python 文件中:
from sklearn import cross_validation
from sklearn.naive_bayes import GaussianNB
import numpy as np
import matplotlib.pyplot as plt
in_file = 'data_multivar.txt'
a = []
b = []
with open(in_file, 'r') as f:
  for line in f.readlines():
    data = [float(x) for x in line.split(',')]
    a.append(data[:-1])
    b.append(data[-1])
a = np.array(a)
b = np.array(b)
  1. 将 75%的数据用于训练,25%的数据用于测试:
a_training, a_testing, b_training, b_testing = cross_validation.train_test_split(a, b, test_size=0.25, random_state=5)
classification_gaussiannb_new = GaussianNB()
classification_gaussiannb_new.fit(a_training, b_training)
  1. 在测试数据上评估分类器的性能:
b_test_pred = classification_gaussiannb_new.predict(a_testing)
  1. 计算分类器系统的准确性:
correctness = 100.0 * (b_testing == b_test_pred).sum() / a_testing.shape[0]
print "correctness of the classification =", round(correctness, 2), "%"
  1. 绘制测试数据的数据点和边界:
def plot_classification(classification_gaussiannb_new, a_testing , b_testing):
  a_min, a_max = min(a_testing[:, 0]) - 1.0, max(a_testing[:, 0]) + 1.0
  b_min, b_max = min(a_testing[:, 1]) - 1.0, max(a_testing[:, 1]) + 1.0
  step_size = 0.01
  a_values, b_values = np.meshgrid(np.arange(a_min, a_max, step_size), np.arange(b_min, b_max, step_size))
  mesh_output = classification_gaussiannb_new.predict(np.c_[a_values.ravel(), b_values.ravel()])
  mesh_output = mesh_output.reshape(a_values.shape)
  plt.figure()
  plt.pcolormesh(a_values, b_values, mesh_output, cmap=plt.cm.gray)
  plt.scatter(a_testing[:, 0], a_testing[:, 1], c=b_testing , s=80, edgecolors='black', linewidth=1,cmap=plt.cm.Paired)
 # specify the boundaries of the figure  plt.xlim(a_values.min(), a_values.max())
  plt.ylim(b_values.min(), b_values.max())
  # specify the ticks on the X and Y axes
  plt.xticks((np.arange(int(min(a_testing[:, 0])-1), int(max(a_testing[:, 0])+1), 1.0)))
  plt.yticks((np.arange(int(min(a_testing[:, 1])-1), int(max(a_testing[:, 1])+1), 1.0)))
  plt.show()
plot_classification(classification_gaussiannb_new, a_testing, b_testing)

在以下截图中显示了数据集分割时获得的准确性:

使用交叉验证评估准确性

交叉验证在机器学习中是必不可少的。最初,我们将数据集分割为训练集和测试集。接下来,为了构建一个健壮的分类器,我们重复这个过程,但需要避免过度拟合模型。过度拟合表示我们对训练集获得了很好的预测结果,但对测试集获得了非常糟糕的结果。过度拟合导致模型的泛化能力差。

如何做...

  1. 导入软件包:
from sklearn import cross_validation
from sklearn.naive_bayes import GaussianNB
import numpy as np
in_file = 'cross_validation_multivar.txt'
a = []
b = []
with open(in_file, 'r') as f:
  for line in f.readlines():
    data = [float(x) for x in line.split(',')]
    a.append(data[:-1])
    b.append(data[-1])
a = np.array(a)
b = np.array(b)
classification_gaussiannb = GaussianNB()
  1. 计算分类器的准确性:
num_of_validations = 5
accuracy = cross_validation.cross_val_score(classification_gaussiannb, a, b, scoring='accuracy', cv=num_of_validations)
print "Accuracy: " + str(round(100* accuracy.mean(), 2)) + "%"
f1 = cross_validation.cross_val_score(classification_gaussiannb, a, b, scoring='f1_weighted', cv=num_of_validations)
print "f1: " + str(round(100*f1.mean(), 2)) + "%"
precision = cross_validation.cross_val_score(classification_gaussiannb,a, b, scoring='precision_weighted', cv=num_of_validations)
print "Precision: " + str(round(100*precision.mean(), 2)) + "%"
recall = cross_validation.cross_val_score(classification_gaussiannb, a, b, scoring='recall_weighted', cv=num_of_validations)
print "Recall: " + str(round(100*recall.mean(), 2)) + "%"
  1. 执行交叉验证后获得的结果如下所示:

为了了解它在给定的句子数据集上的工作情况,请参考以下链接:

  • 逻辑回归简介:

machinelearningmastery.com/logistic-regression-for-machine-learning/

分析一个句子的情感

情感分析是指找出特定文本部分是积极的、消极的还是中性的过程。这种技术经常被用来了解人们对特定情况的看法。它评估了消费者在不同形式中的情感,比如广告活动、社交媒体和电子商务客户。

如何做...

  1. 创建一个新文件并导入所选的包:
import nltk.classify.util
from nltk.classify import NaiveBayesClassifier
from nltk.corpus import movie_reviews
  1. 描述一个提取特征的函数:
def collect_features(word_list):
  word = []
  return dict ([(word, True) for word in word_list])
  1. 采用 NLTK 中的电影评论作为训练数据:
if __name__=='__main__':
  plus_filenum = movie_reviews.fileids('pos')
  minus_filenum = movie_reviews.fileids('neg')
  1. 将数据分成积极和消极的评论:
  feature_pluspts = [(collect_features(movie_reviews.words(fileids=[f])),
'Positive') for f in plus_filenum]
  feature_minuspts = [(collect_features(movie_reviews.words(fileids=[f])),
'Negative') for f in minus_filenum]
  1. 将数据分成训练和测试数据集:
  threshold_fact = 0.8
  threshold_pluspts = int(threshold_fact * len(feature_pluspts))
  threshold_minuspts = int(threshold_fact * len(feature_minuspts))
  1. 提取特征:
  feature_training = feature_pluspts[:threshold_pluspts] + feature_minuspts[:threshold_minuspts]
  feature_testing = feature_pluspts[threshold_pluspts:] + feature_minuspts[threshold_minuspts:]
  print "nNumber of training datapoints:", len(feature_training)
  print "Number of test datapoints:", len(feature_testing)
  1. 考虑朴素贝叶斯分类器,并用指定的目标进行训练:
  # Train a Naive Bayes classifiers
  classifiers = NaiveBayesClassifier.train(feature_training)
  print "nAccuracy of the classifiers:",nltk.classify.util.accuracy(classifiers,feature_testing)
  print "nTop 10 most informative words:"
  for item in classifiers.most_informative_features()[:10]:print item[0]
 # Sample input reviews  in_reviews = [
  "The Movie was amazing",
  "the movie was dull. I would never recommend it to anyone.",
  "The cinematography is pretty great in the movie",
  "The direction was horrible and the story was all over the place"
  ]
  print "nPredictions:"
  for review in in_reviews:
    print "nReview:", review
  probdist = classifiers.prob_classify(collect_features(review.split()))
  predict_sentiment = probdist.max()
  print "Predicted sentiment:", predict_sentiment
  print "Probability:", round(probdist.prob(predict_sentiment), 2)
  1. 情感分析的结果如下所示:

使用主题建模在文本中识别模式

主题建模是指识别手稿信息中隐藏模式的过程。其目标是在一系列文件中揭示一些隐藏的主题结构。

如何做...

  1. 导入以下包:
from nltk.tokenize import RegexpTokenizer
from nltk.stem.snowball import SnowballStemmer
from gensim import models, corpora
from nltk.corpus import stopwords
  1. 加载输入数据:
def load_words(in_file):
  element = []
  with open(in_file, 'r') as f:
    for line in f.readlines():
      element.append(line[:-1])
  return element
  1. 预处理文本的类:
classPreprocedure(object):
  def __init__(self):
 # Create a regular expression tokenizer    self.tokenizer = RegexpTokenizer(r'w+')
  1. 获取停用词列表以终止程序执行:
    self.english_stop_words= stopwords.words('english')
  1. 创建一个 Snowball 词干提取器:
    self.snowball_stemmer = SnowballStemmer('english')  
  1. 定义一个执行标记化、停用词去除和词干处理的函数:
  def procedure(self, in_data):
# Tokenize the string
    token = self.tokenizer.tokenize(in_data.lower())
  1. 从文本中消除停用词:
    tokenized_stopwords = [x for x in token if not x in self.english_stop_words]
  1. 对标记进行词干处理:
    token_stemming = [self.snowball_stemmer.stem(x) for x in tokenized_stopwords]
  1. 返回处理过的标记:
    return token_stemming
  1. main函数加载输入数据:
if __name__=='__main__':
 # File containing input data  in_file = 'data_topic_modeling.txt'
 # Load words  element = load_words(in_file)
  1. 创建一个对象:
  preprocedure = Preprocedure()
  1. 处理文件并提取标记:
  processed_tokens = [preprocedure.procedure(x) for x in element]
  1. 根据标记化的文档创建一个字典:
  dict_tokens = corpora.Dictionary(processed_tokens)
  corpus = [dict_tokens.doc2bow(text) for text in processed_tokens]
  1. 开发一个 LDA 模型,定义所需的参数,并初始化 LDA 目标:
  num_of_topics = 2
  num_of_words = 4
  ldamodel = models.ldamodel.LdaModel(corpus,num_topics=num_of_topics, id2word=dict_tokens, passes=25)
  print "Most contributing words to the topics:"
  for item in ldamodel.print_topics(num_topics=num_of_topics, num_words=num_of_words):
    print "nTopic", item[0], "==>", item[1]
  1. 执行topic_modelling.py时获得的结果如下截图所示:

情感分析的应用

情感分析在社交媒体如 Facebook 和 Twitter 中使用,以找出公众对某个问题的情感(积极/消极)。它们还用于确定人们对广告的情感以及人们对您的产品、品牌或服务的感受。

第五章:在图像中检测边缘和轮廓

本章介绍以下主题:

  • 加载、显示和保存图像

  • 图像翻转和缩放

  • 腐蚀和膨胀

  • 图像分割

  • 模糊和锐化图像

  • 在图像中检测边缘

  • 直方图均衡化

  • 在图像中检测角点

介绍

图像处理在几乎所有工程和医学应用中都起着至关重要的作用,用于从灰度/彩色图像中提取和评估感兴趣区域。图像处理方法包括预处理、特征提取和分类。预处理用于增强图像的质量;这包括自适应阈值处理、对比度增强、直方图均衡化和边缘检测。特征提取技术用于从图像中提取显著特征,以供后续分类使用。

本章介绍了构建图像预处理方案的程序。

加载、显示和保存图像

本节介绍了如何通过 OpenCV-Python 处理图像。此外,我们讨论了如何加载、显示和保存图像。

如何做...

  1. 导入计算机视觉包-cv2
import cv2 
  1. 使用内置的imread函数读取图像:
image = cv2.imread('image_1.jpg')
  1. 使用内置的imshow函数显示原始图像:
cv2.imshow("Original", image) 
  1. 等待按下任意键:
cv2.waitKey(0) 
  1. 使用内置的imwrite函数保存图像:
cv2.imwrite("Saved Image.jpg", image) 
  1. 用于执行 Python 程序Load_Display_Save.py的命令如下所示:

  1. 执行Load_Display_Save.py后获得的结果如下所示:

图像翻转

在图像翻转操作中,我们可以水平、垂直、水平和垂直翻转输入图像。

如何做...

  1. 导入计算机视觉包-cv2
import cv2 
  1. 使用内置的imread函数读取图像:
image = cv2.imread('image_2.jpg')
  1. 使用内置的imshow函数显示原始图像:
cv2.imshow("Original", image) 
  1. 等待按下任意键:
cv2.waitKey(0) 
  1. 对测试图像执行所需操作:
# cv2.flip is used to flip images 
# Horizontal flipping of images using value '1' 
flipping = cv2.flip(image, 1) 
  1. 显示水平翻转的图像:
# Display horizontally flipped image 
cv2.imshow("Horizontal Flipping", flipping) 
  1. 等待按下任意键:
cv2.waitKey(0) 
  1. 执行输入图像的垂直翻转:
# Vertical flipping of images using value '0' 
flipping = cv2.flip(image, 0) 
  1. 显示垂直翻转的图像:
cv2.imshow("Vertical Flipping", flipping) 
  1. 等待按下任意键:
cv2.waitKey(0) 
  1. 显示处理后的图像:
# Horizontal & Vertical flipping of images using value '-1' 
flipping = cv2.flip(image, -1) 
# Display horizontally & vertically flipped image 
cv2.imshow("Horizontal & Vertical Flipping", flipping) 
# Wait until any key is pressed 
cv2.waitKey(0)
  1. 停止执行并显示结果:
# Close all windows 
cv2.destroyAllWindows() 
  1. 用于执行Flipping.py Python 程序的命令如下所示:

  1. 执行Flipping.py后获得的原始和水平翻转的图像如下所示:

以下是水平翻转的图片:

  1. 执行Flipping.py后获得的垂直、水平和垂直翻转的图像如下所示:

以下是水平和垂直翻转的图片:

图像缩放

图像缩放用于根据要求修改输入图像的尺寸。在 OpenCV 中通常使用三种类型的缩放操作符,它们是立方、区域和线性插值。

如何做...

  1. 创建一个新的 Python 文件并导入以下包:
# Scaling (Resizing) Images - Cubic, Area, Linear Interpolations 
# Interpolation is a method of estimating values between known data points  
# Import Computer Vision package - cv2 
import cv2 
# Import Numerical Python package - numpy as np 
import numpy as np 
  1. 使用内置的imread函数读取图像:
image = cv2.imread('image_3.jpg') 
  1. 使用内置的imshow函数显示原始图像:
cv2.imshow("Original", image) 
  1. 等待按下任意键:
cv2.waitKey() 
  1. 根据操作员的命令调整图像大小:
# cv2.resize(image, output image size, x scale, y scale, interpolation) 
  1. 使用立方插值调整图像大小:
# Scaling using cubic interpolation 
scaling_cubic = cv2.resize(image, None, fx=.75, fy=.75, interpolation = cv2.INTER_CUBIC) 
  1. 显示输出图像:
# Display cubic interpolated image 
cv2.imshow('Cubic Interpolated', scaling_cubic) 
  1. 等待按下任意键:
cv2.waitKey()
  1. 使用区域插值调整图像大小:
# Scaling using area interpolation 
scaling_skewed = cv2.resize(image, (600, 300), interpolation = cv2.INTER_AREA) 
  1. 显示输出图像:
# Display area interpolated image 
cv2.imshow('Area Interpolated', scaling_skewed)  
  1. 等待操作员的指示:
# Wait until any key is pressed 
cv2.waitKey() 
  1. 使用线性插值调整图像大小:
# Scaling using linear interpolation 
scaling_linear  = cv2.resize(image, None, fx=0.5, fy=0.5, interpolation = cv2.INTER_LINEAR) 
  1. 显示输出图像:
# Display linear interpolated image 
cv2.imshow('Linear Interpolated', scaling_linear)  
  1. 等待按下任意键:
cv2.waitKey() 
  1. 完成图像缩放任务后,终止程序执行:
# Close all windows 
cv2.destroyAllWindows() 
  1. 用于执行Scaling.py Python 程序的命令如下所示:

  1. 用于缩放的原始图像如下所示:

  1. 执行Scaling.py文件后获得的线性插值输出如下所示:

  1. 执行Scaling.py文件后获得的面积插值输出如下所示:

  1. 执行Scaling.py文件后获得的立方插值输出如下所示:

腐蚀和膨胀

腐蚀和膨胀是形态学操作。腐蚀去除图像中对象边界的像素,而膨胀在图像中对象的边界上添加像素。

如何做...

  1. 导入计算机视觉包 - cv2
import cv2 
  1. 导入数值 Python 包 - numpy as np
import numpy as np 
  1. 使用内置的imread函数读取图像:
image = cv2.imread('image_4.jpg')
  1. 使用内置的imshow函数显示原始图像:
cv2.imshow("Original", image) 
  1. 等待按任意键:
cv2.waitKey(0) 
  1. 给定形状和类型,用 1 填充:
# np.ones(shape, dtype) 
# 5 x 5 is the dimension of the kernel, uint8: is an unsigned integer (0 to 255) 
kernel = np.ones((5,5), dtype = "uint8") 
  1. cv2.erode是用于腐蚀的内置函数:
# cv2.erode(image, kernel, iterations) 
erosion = cv2.erode(image, kernel, iterations = 1) 
  1. 使用内置的imshow函数显示腐蚀后的图像:
cv2.imshow("Erosion", erosion) 
  1. 等待按任意键:
cv2.waitKey(0) 
  1. cv2.dilate是用于膨胀的内置函数:
# cv2.dilate(image, kernel, iterations) 
dilation = cv2.dilate(image, kernel, iterations = 1) 
  1. 使用内置的imshow函数显示膨胀后的图像:
cv2.imshow("Dilation", dilation) 
  1. 等待按任意键:
cv2.waitKey(0) 
  1. 关闭所有窗口:
cv2.destroyAllWindows()
  1. 用于执行Erosion_Dilation.py文件的命令如下所示:

  1. 用于执行Erosion_Dilation.py文件的输入图像如下所示:

  1. 执行Erosion_Dilation.py文件后获得的腐蚀图像如下所示:

  1. 执行Erosion_Dilation.py文件后获得的膨胀图像如下所示:

图像分割

分割是将图像分成不同区域的过程。轮廓是对象边界周围的线条或曲线。本节讨论了使用轮廓进行图像分割。

如何做...

  1. 导入计算机视觉包 - cv2
import cv2 
# Import Numerical Python package - numpy as np 
import numpy as np 
  1. 使用内置的imread函数读取图像:
image = cv2.imread('image_5.jpg') 
  1. 使用内置的imshow函数显示原始图像:
cv2.imshow("Original", image) 
  1. 等待按任意键:
cv2.waitKey(0) 
  1. 执行Canny边缘检测系统:
# cv2.Canny is the built-in function used to detect edges 
# cv2.Canny(image, threshold_1, threshold_2) 
canny = cv2.Canny(image, 50, 200) 
  1. 使用内置的imshow函数显示检测到的边缘输出图像:
cv2.imshow("Canny Edge Detection", canny) 
  1. 等待按任意键:
cv2.waitKey(0)
  1. 执行轮廓检测系统:
# cv2.findContours is the built-in function to find contours 
# cv2.findContours(canny, contour retrieval mode, contour approximation mode) 
# contour retrieval mode: cv2.RETR_LIST (retrieves all contours)  
# contour approximation mode: cv2.CHAIN_APPROX_NONE (stores all boundary points) 
contours, hierarchy = cv2.findContours(canny, cv2.RETR_LIST, cv2.CHAIN_APPROX_NONE) 
  1. 在图像上勾画轮廓:
# cv2.drawContours is the built-in function to draw contours 
# cv2.drawContours(image, contours, index of contours, color, thickness) 
cv2.drawContours(image, contours, -1, (255,0,0), 10) 
# index of contours = -1 will draw all the contours 
  1. 显示图像的勾画轮廓:
# Display contours using imshow built-in function 
cv2.imshow("Contours", image) 
  1. 等待按任意键:
cv2.waitKey() 
  1. 终止程序并显示结果:
# Close all windows 
cv2.destroyAllWindows() 
  1. 执行Image_Segmentation.py文件后获得的结果如下所示:

以下是边缘检测输出:

模糊和锐化图像

模糊和锐化是用于增强输入图像的图像处理操作。

如何做...

  1. 导入计算机视觉包 - cv2
import cv2 
# Import Numerical Python package - numpy as np 
import numpy as np 
  1. 使用内置的imread函数读取图像:
image = cv2.imread('image_6.jpg') 
  1. 使用内置的imshow函数显示原始图像:
cv2.imshow("Original", image) 
  1. 等待按任意键:
cv2.waitKey(0) 
  1. 执行模糊操作的像素级操作:
# Blurring images: Averaging, cv2.blur built-in function 
# Averaging: Convolving image with normalized box filter 
# Convolution: Mathematical operation on 2 functions which produces third function. 
# Normalized box filter having size 3 x 3 would be: 
# (1/9)  [[1, 1, 1], 
#         [1, 1, 1], 
#         [1, 1, 1]] 
blur = cv2.blur(image,(9,9)) # (9 x 9) filter is used  
  1. 显示模糊的图像:
cv2.imshow('Blurred', blur) 
  1. 等待按任意键:
cv2.waitKey(0)
  1. 执行锐化操作的像素级操作:
# Sharpening images: Emphasizes edges in an image 
kernel = np.array([[-1,-1,-1],  
                   [-1,9,-1],  
                   [-1,-1,-1]]) 
# If we don't normalize to 1, image would be brighter or darker respectively     
# cv2.filter2D is the built-in function used for sharpening images 
# cv2.filter2D(image, ddepth, kernel) 
# ddepth = -1, sharpened images will have same depth as original image 
sharpened = cv2.filter2D(image, -1, kernel) 
  1. 显示锐化后的图像:
cv2.imshow('Sharpened', sharpened) 
  1. 等待按任意键:
cv2.waitKey(0) 
  1. 终止程序执行:
# Close all windows 
cv2.destroyAllWindows() 
  1. 用于执行Blurring_Sharpening.py的命令如下所示:

  1. 用于执行Blurring_Sharpening.py文件的输入图像如下所示:

  1. 执行Blurring_Sharpening.py文件后获得的模糊图像如下所示:

  1. 执行Blurring_Sharpening.py文件后获得的锐化图像如下所示:

在图像中检测边缘

边缘检测用于检测图像中的边界。它提供有关形状和区域属性的详细信息。这包括周长、主轴大小和次轴大小。

如何做...

  1. 导入必要的包:
import sys 
import cv2 
import numpy as np 
  1. 读取输入图像:
in_file = sys.argv[1] 
image = cv2.imread(in_file, cv2.IMREAD_GRAYSCALE) 
  1. 实现 Sobel 边缘检测方案:
horizontal_sobel = cv2.Sobel(image, cv2.CV_64F, 1, 0, ksize=5) 
vertical_sobel = cv2.Sobel(image, cv2.CV_64F, 0, 1, ksize=5) 
laplacian_img = cv2.Laplacian(image, cv2.CV_64F) 
canny_img = cv2.Canny(image, 30, 200) 
  1. 显示输入图像及其对应的输出:
cv2.imshow('Original', image) 
cv2.imshow('horizontal Sobel', horizontal_sobel) 
cv2.imshow('vertical Sobel', vertical_sobel) 
cv2.imshow('Laplacian image', laplacian_img) 
cv2.imshow('Canny image', canny_img) 
  1. 等待操作员的指示:
cv2.waitKey() 
  1. 显示输入图像和相应的结果:
cv2.imshow('Original', image) 
cv2.imshow('horizontal Sobel', horizontal_sobel) 
cv2.imshow('vertical Sobel', vertical_sobel) 
cv2.imshow('Laplacian image', laplacian_img) 
cv2.imshow('Canny image', canny_img) 
  1. 等待操作员的指示:
cv2.waitKey()
  1. 用于执行Detecting_edges.py Python 程序文件的命令,以及输入图像(baby.jpg)如下所示:

  1. 执行Detecting_edges.py文件后获得的输入图像和水平 Sobel 滤波器输出如下所示:

  1. 执行Detecting_edges.py文件后获得的垂直 Sobel 滤波器输出和拉普拉斯图像输出如下所示:

以下是拉普拉斯图像输出:

  1. 执行Detecting_edges.py文件后获得的Canny边缘检测输出如下所示:

它是如何工作的...

读者可以参考以下文档,了解边缘检测是什么,以及它对测试图片的影响:

citeseerx.ist.psu.edu/viewdoc/summary?doi=10.1.1.301.927

另请参见

请参阅以下文档:

直方图均衡化

直方图均衡化用于增强图像的可见性和对比度。它通过改变图像的强度来执行。这些程序在这里有清晰的描述。

如何做...

  1. 导入必要的包:
import sys 
import cv2 
import numpy as np 
  1. 加载输入图像:
in_file = sys.argv[1] 
image = cv2.imread(in_file) 
  1. 将 RGB 图像转换为灰度图像:
image_gray = cv2.cvtColor(image, cv2.COLOR_BGR2GRAY) 
cv2.imshow('Input grayscale image', image_gray) 
  1. 调整灰度图像的直方图:
image_gray_histoeq = cv2.equalizeHist(image_gray) 
cv2.imshow('Histogram equalized - grayscale image', image_gray_histoeq) 
  1. 调整 RGB 图像的直方图:
image_yuv = cv2.cvtColor(image, cv2.COLOR_BGR2YUV) 
image_yuv[:,:,0] = cv2.equalizeHist(image_yuv[:,:,0]) 
image_histoeq = cv2.cvtColor(image_yuv, cv2.COLOR_YUV2BGR) 
  1. 显示输出图像:
cv2.imshow('Input image', image) 
cv2.imshow('Histogram equalized - color image', image_histoeq) 
cv2.waitKey()
  1. 用于执行histogram.py Python 程序文件的命令,以及输入图像(finger.jpg)如下所示:

  1. 用于执行histogram.py文件的输入图像如下所示:

  1. 执行histogram.py文件后获得的直方图均衡化灰度图像如下所示:

  1. 执行histogram.py文件后获得的直方图均衡化彩色图像如下所示:

在图像中检测角点

角点是图像中用于提取推断图像内容的特殊特征的边界。角点检测经常用于图像配准、视频跟踪、图像拼接、运动检测、3D 建模、全景拼接和物体识别。

如何做...

  1. 导入必要的包:
import sys 
import cv2 
import numpy as np 
  1. 加载输入图像:
in_file = sys.argv[1] 
image = cv2.imread(in_file) 
cv2.imshow('Input image', image) 
image_gray1 = cv2.cvtColor(image, cv2.COLOR_BGR2GRAY) 
image_gray2 = np.float32(image_gray1) 
  1. 实现 Harris 角点检测方案:
image_harris1 = cv2.cornerHarris(image_gray2, 7, 5, 0.04) 
  1. 膨胀输入图像并构造角点:
image_harris2 = cv2.dilate(image_harris1, None) 
  1. 实现图像阈值处理:
image[image_harris2 > 0.01 * image_harris2.max()] = [0, 0, 0] 
  1. 显示输入图像:
cv2.imshow('Harris Corners', image) 
  1. 等待操作员的指示:
cv2.waitKey() 
  1. 用于执行Detecting_corner.py Python 程序文件的命令,以及输入图像(box.jpg)如下所示:

  1. 用于执行Detecting_corner.py文件的输入图像如下所示:

  1. 执行Detecting_corner.py文件后获得的 Harris 角点如下所示:

要了解它如何作用于输入图片,请参考以下内容:

  • 图像角点检测涉及在给定图片中找到边缘/角点。它可以用于从灰度和 RGB 图片中提取重要的形状特征。参考这篇关于边缘和角点检测的调查论文:

pdfs.semanticscholar.org/24dd/6c2c08f5601e140aad5b9170e0c7485f6648.pdf

标签:指南,入门,Python,image,cv2,TK,图像,import,self
From: https://www.cnblogs.com/apachecn/p/18138370

相关文章

  • Python 物联网入门指南(三)
    原文:zh.annas-archive.org/md5/4fe4273add75ed738e70f3d05e428b06译者:飞龙协议:CCBY-NC-SA4.0第六章:构建人脸检测器和人脸识别应用程序本章介绍以下主题:人脸识别系统简介构建人脸检测器应用程序构建人脸识别应用程序人脸识别系统的应用介绍近年来,人脸识别......
  • 洛谷题单指南-数学基础问题-P3601 签到题
    原题链接:https://www.luogu.com.cn/problem/P3601题意解读:求l~r范围内所有qiandao(x)之和,qiandao(x)为小于等于x的数中,与x不互质的数的个数。注意取模。解题思路:欧拉函数定义:phi(x)=x*(1-1/p1)*(1-1/p2)*...*(1-1/pn),p1,p2...pn为x的所有质因子其中:phi(x)表示1~x中所......
  • Python 数学应用(四)
    原文:zh.annas-archive.org/md5/123a7612a4e578f6816d36f968cfec22译者:飞龙协议:CCBY-NC-SA4.0第十一章:其他主题在本章中,我们将讨论一些在本书前几章中没有涉及的主题。这些主题大多涉及不同的计算方式以及优化代码执行的其他方式。其他主题涉及处理特定类型的数据或文件格......
  • Effective Python:第2条 遵循PEP 8风格指南
    PEP8文档:https://peps.python.org/pep-0008/与空白有关的建议:用空格(space)表示缩进,而不要用制表符(tab)。和语法相关的每一层缩进都用4个空格表示。每行不超过79个字符。对于占据多行的长表达式来说,除了首行之外的其余各行都应该在通常的缩进级别之上再加4个空格。......
  • CentOS 7.9 python 虚拟环境安装mysqlclient失败
    目录环境懵懂安装报错原因解决完结撒花......
  • 运行python安装包没找到
    一、错误信息ImportError:dlopen(/Users/menghuiding/Library/Python/3.8/lib/python/site-packages/PIL/_imaging.cpython-38-darwin.so,0x0002):tried:'/Users/menghuiding/Library/Python/3.8/lib/python/site-packages/PIL/_imaging.cpython-38-darwin.so'(ma......
  • FPGA入门笔记013——嵌入式块RAM使用之FIFO
    1、FIFO概述​ FIFO(FirstInFirstOut),即先进先出。FPGA或者ASIC中使用到的FIFO一般指的是对数据的存储具有先进先出特性的一个缓存器,常被用于数据的缓存或者高速异步数据的交互。它与普通存储器的区别是没有外部读写地址线,这样使用起来相对简单,但缺点就是只能顺序写入数据......
  • Python- pyecharts 制作示例可视化图表
    1、开发可视化图表使用的技术栈:Echarts框架的Python包——pyecharts2、官方网站:pyecharts-APythonEchartsPlottingLibrarybuiltwithlove.3、官方画廊:中文简介-Document(pyecharts.org)安装pyecharts包:pipinstallpyecharts一、构建各类图表所创建的对象......
  • Python Flask+Pandas读取excel显示到html网页: CSS控制表格样式
    前言全局说明CSS控制表格样式一、安装flask模块二、引用模块三、启动服务模块安装、引用模块、启动Web服务方法,参考下面链接文章:https://www.cnblogs.com/wutou/p/17963563修改内容后,要重启flask服务,修改才能生效四、CSS控制表格样式4.1.2文件名:index.pyfrom......
  • Python Flask+Pandas读取excel显示到html网页:CSS控制表格样式
    前言全局说明一、安装flask模块二、引用模块三、启动服务模块安装、引用模块、启动Web服务方法,参考下面链接文章:https://www.cnblogs.com/wutou/p/17963563四、CSS控制表格样式4.1.2文件名:index.pyfromflaskimportFlaskapp=Flask(__name__)@app.route("/excel......