Python收取郵件並數據處理

最近由於工作需要，對參會的代表發給我的姓名、電話、公司、行程車次等信息進行統計處理形成聯繫單，我的思路是：可以Python利用POP協議自動收取郵件，Numpy+Pandas對發來的數據進行處理並導出至Excel / MySQL數據庫。

收取郵件就是編寫一個MUA作爲客戶端，從MDA把郵件獲取到用戶的電腦或者手機上。收取郵件最常用的協議是POP協議，目前版本號是3，俗稱POP3。

POP3協議收取的不是一個已經可以閱讀的郵件本身，而是郵件的原始文本，這和SMTP協議很像，SMTP發送的也是經過編碼後的一大段文本。

要把POP3收取的文本變成可以閱讀的郵件，還需要用email模塊提供的各種類來解析原始文本，變成可閱讀的郵件對象。
所以，用Python的poplib模塊收取郵件分兩步：第一步是用POP3協議把郵件獲取到本地，第二步是用email模塊把原始郵件解析爲Message對象，然後，用適當的形式把郵件內容展示給用戶。

收取郵件

from email.parser import Parser
from email.header import decode_header
from email.utils import parseaddr
import poplib

def decode_str(s):
    value, charset = decode_header(s)[0]
    if charset:
        value = value.decode(charset)
    return value

def guess_charset(msg):
    charset = msg.get_charset()
    if charset is None:
        content_type = msg.get('Content-Type', '').lower()
        pos = content_type.find('charset=')
        if pos >= 0:
            charset = content_type[pos + 8:].strip()
    return charset

def print_info(msg, indent=0):
    if indent == 0:
        for header in ['From', 'To', 'Subject']:
            value = msg.get(header, '')
            if value:
                if header=='Subject':
                    value = decode_str(value)
                else:
                    hdr, addr = parseaddr(value)
                    name = decode_str(hdr)
                    value = u'%s <%s>' % (name, addr)
            print('%s%s: %s' % ('  ' * indent, header, value))
    if (msg.is_multipart()):
        parts = msg.get_payload()
        for n, part in enumerate(parts):
            print('%spart %s' % ('  ' * indent, n))
            print('%s--------------------' % ('  ' * indent))
            print_info(part, indent + 1)
    else:
        content_type = msg.get_content_type()
        if content_type=='text/plain' or content_type=='text/html':
            content = msg.get_payload(decode=True)
            charset = guess_charset(msg)
            if charset:
                content = content.decode(charset)
            print('%sText: %s' % ('  ' * indent, content + '...'))
        else:
            print('%sAttachment: %s' % ('  ' * indent, content_type))

# 輸入郵件地址, 口令和POP3服務器地址:
email = "[email protected]"
password = "uawv"
pop3_server = "pop.qq.com"

# 連接到POP3服務器:
server = poplib.POP3_SSL(pop3_server)
# 可以打開或關閉調試信息:
#server.set_debuglevel(1)
# 可選:打印POP3服務器的歡迎文字:
#print(server.getwelcome().decode('utf-8'))

# 身份認證:
server.user(email)
server.pass_(password)

# stat()返回郵件數量和佔用空間:
#print('Messages: %s. Size: %s' % server.stat())
# list()返回所有郵件的編號:
resp, mails, octets = server.list()
# 可以查看返回的列表類似[b'1 82923', b'2 2184', ...]
#print(mails)

# 獲取最新一封郵件, 注意索引號從1開始:
index = len(mails)
resp, lines, octets = server.retr(index)

# lines存儲了郵件的原始文本的每一行,
# 可以獲得整個郵件的原始文本:
msg_content = b'\r\n'.join(lines).decode('utf-8')
# 稍後解析出郵件:
msg = Parser().parsestr(msg_content)
print_info(msg)

# 可以根據郵件索引號直接從服務器刪除郵件:
# server.dele(index)
# 關閉連接:
server.quit()

郵件內容處理

現在分析一下郵件

導出至Excel