让python自动给你报告百度新收录了多少页面,并发送到你的邮箱

 Lan   2020-05-24 08:44   474 人阅读  3 条评论

image.png

这两天,百度终于开始收录我的内页了,虽然只是每天收录那么一两条,但是已经让我感觉很不错了(就是这么容易满足),有时候想看看百度收录了我多少页面了,电脑又不在身边,手机操作又不方便,于是就写了这么个Python脚本。

功能:

  1. 如果有新收录,发送邮件到指定邮箱

  2. 每个一小时监控一次。

  3. 发送新增页面,和总页面,以及其数量

效果图:image.png

代码:

import smtplib
import time
from email.mime.text import MIMEText

import parsel
import requests


def get_info(domain):
    url = f'http://tool.chinaz.com/baidu/?lm=0&wd={domain}&rn=50'
    headers = {
        'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) ApplewebKit/537.36 (KHtml, like Gecko) Chrome/81.0.4044.138 Safari/537.36',
    }
    html = requests.get(url=url, headers=headers).text
    html = parsel.Selector(html)
    titles = html.Xpath("//a[@class='col-blue02']/text()").extract()
    urls = html.xpath("//a[@class='col-blue02']/@href").extract()
    pages = html.xpath("//a[@class='item'][last()]/text()").extract()
    try:
        nums = int(html.xpath("//span[@class='col-blue02'][2]/a/text()").extract()[0])
        if pages:
            pages = int(pages[0]) * 10
        else:
            pages = 0
        if pages == 0:
            return {
                'titles': titles,
                'urls': urls,
                'nums': nums
            }
        else:
            all_title = []
            all_urls = []
            for i in range(0, pages, 10):
                url = f'http://tool.chinaz.com/baidu/?pn={i}&wd={domain}&rn=10'
                html = requests.get(url=url, headers=headers).text
                html = parsel.Selector(html)
                print(i)
                all_title.extend(html.xpath("//a[@class='col-blue02']/text()").extract())
                all_urls.extend(html.xpath("//a[@class='col-blue02']/@href").extract())
            return {
                'titles': all_title,
                'urls': all_urls,
                'nums': nums
            }
    except:
        print("此网站被屏蔽!!!")



def send_mail(infomation, old_nums, old_titles, recever):
    newnums = infomation['nums']
    titles = infomation['titles']
    urls = infomation['urls']
    new_contents = ''
    if infomation['nums'] > old_nums:
        for i in range(len(titles)):
            if titles[i] not in old_titles:
                new_contents += f'{titles[i]}\n{urls[i]}\n'
        mail_content = f'老大,截至{time.strftime("%Y年%m月%d日%H:%M:%S", time.localtime())}\n百度新收录:{newnums - old_nums}条\n总计收录:{newnums}条\n新收录信息如下:'
        mail_content += new_contents
        mail_content += '目前收录如下:\n'
        # By:www.lanol.cn
        # autor:Lan
        for i in range(len(titles)):
            mail_content += f'{titles[i]}\n{urls[i]}\n'
        try:
            content = MIMEText(mail_content, 'plain', 'utf-8')
            reveivers = f"{recever}"
            content['To'] = reveivers  # 设置邮件的接收者,多个接收者之间用逗号隔开
            content['From'] = str("admin@lanol.cn")  # 邮件的发送者,最好写成str("这里填发送者"),不然可能会出现乱码
            content['Subject'] = f"老大,你的网站又被百度收录啦!!!{time.strftime('%Y年%m月%d日%H:%M:%S', time.localtime())}"  # 邮件的主题
            smtp_server = smtplib.SMTP_SSL("smtp.exmail.qq.com", 465)
            smtp_server.login("{发送邮箱}", "{邮箱密码}")
            smtp_server.sendmail("admin@lanol.cn", [recever], content.as_string())
            smtp_server.quit()
        except Exception as e:
            print(str(e))

        except smtplib.SMTPException:
            print("Error: 无法发送邮件")

    return {
        'newnums': newnums,
        'titles': titles,
        'urls': urls
    }


if __name__ == '__main__':
    domain = input("请输入你要监控的网址(如:www.lanol.cn,不需要加https这些):")
    reveiver = input("请输入收信邮箱(如:78013994@qq.com):")
    nums = 0
    titles = []
    urls = []
    while True:
        new_infomation = send_mail(get_info(domain), nums, titles, reveiver)
        nums = new_infomation['newnums']
        titles = new_infomation['titles']
        urls = new_infomation['urls']
        print(f'{time.strftime("%Y年%m月%d日%H:%M:%S", time.localtime())}检查成功')
        time.sleep(3600)

哈哈,刚刚发现个Bug,一个小时之后不能再发送,已经修复了,可以重新下载一下

image.png

成品下载地址:


已经过安全软件检测无毒,请您放心下载。
本文地址:https://www.lanol.cn/post/238.html
版权声明:本文为原创文章,版权归 Lan 所有,欢迎分享本文,转载请保留出处!

 发表评论


表情

 评论列表

  1. 补剂商
    补剂商  @回复

    骚操作 Python无所不能

  2. 值得入手
    值得入手  @回复

    这个功能强大,有空试试

  3. 访客
    访客  @回复

    厉害