首页 最新 热门 推荐

  • 首页
  • 最新
  • 热门
  • 推荐

第14.16节 爬虫实战2:赠人玫瑰,手留余香! request+BeautifulSoup实现csdn博文自动点赞

  • 23-09-22 14:37
  • 3822
  • 8299
blog.csdn.net

写在前面:本文仅供参考学习,请勿用作它途,禁止转载!

在《第14.14节 爬虫实战准备:csdn博文点赞过程http请求和响应信息分析》老猿分析了csdn博文点赞处理的http请求和响应报文,在《第14.15节 爬虫实战1:使用Python和selenium实现csdn博文点赞》中通过selenium方式实现了博文自动点赞,但selenium方式老猿觉得并不是一个真正的爬虫实现方式,因此本节老猿将通过request+BeautifulSoup的方式实现一个真正爬虫式的CSDN博文自动点赞。

二、 csdn点赞实现的基本思路
本节将实现读取文本文件c: empurllist.txt中的需要点赞的csdn博文记录(一行一个url地址),对每一行记录逐一进行如下处理:
1、 利用已经登录会话读取博文并利用beatifulsoap解析判断博文是否已经点赞,如果是则处理下一条url。本步骤需要知道:
1)怎么利用已经登录会话构建http请求头(函数mkhead)模拟已登录会话的浏览器访问,具体知识请参考《第14.5节 利用浏览器获取的http信息构造Python网页访问的http请求头》;
2)怎么使用beatifulsoap解析报文,本次老猿构建beatifulsoap对象soup后,使用“标签+属性+属性值”的css 选择器来定位点赞按钮,代码为“soup.select(“button[title=‘点赞’]”)”,相关方法请参考《第14.12节 Python中使用BeautifulSoup解析http报文:使用select方法快速定位内容》。
2、 根据博文地址计算出点赞http请求的url,对应函数为getthumbsupURL;
3、 发送点赞的url请求并读取返回的响应报文;
4、 对响应报文解码后判断是否点赞成功,具体判断方法请参考《第14.14节 爬虫实战准备:csdn博文点赞过程http请求和响应信息分析》。代码中判断点赞成功没有使用beatifulsoap,直接使用字符串查找方法,因为该响应报文非常简单,使用字符串查找非常方便。

三、 完整点赞代码
注意:http请求的cookie参数老猿在下面代码中采用了只取一部分真实数据处理以保护老猿自己的会话信息安全,各位需要按照《第14.5节 利用浏览器获取的http信息构造Python网页访问的http请求头》介绍的方法将自己的信息填入请求头中。

#coding:utf-8         
#使用request和beatifulosap实现csdn博文点赞
import time 
import fileinput
from bs4 import BeautifulSoup
import urllib.request

def mkhead():
    #根据使用人员登录csdn的http会话信息填写   
    header = {'Accept':'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3',
    'Accept-Language':'zh-CN,zh;q=0.9',
    'Connection':'keep-alive',
    'Cookie':'uuid_tt_dd=10_35489889920-1563497330616-876822; UserName=LaoYuanPython;......',
    'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/76.0.3809.100 Safari/537.36'}
        
    return header 
    
def getthumbsupURL(articleURL):
    """
    根据点赞文章的url地址计算出点赞请求的url,二者url案例如下:
    需要点赞文章:http://iyenn.com/index/link?url=https://blog.csdn.net/LaoYuanPython/article/details/100585881
    点赞请求:https://blog.csdn.net/laoyuanpython/phoenix/article/digg?ArticleId=100585881
    """
    
    urlwords = articleURL.split('/')
    articleid = urlwords[6] 
    digurlwords = urlwords[0:4]
    digurlwords.append('phoenix/article/digg?ArticleId='+articleid)
    digurl = ''
    for words in digurlwords:
        digurl = digurl+words+'/'
    return digurl

def isthumbsup(url,header):
    """
    读取指定url的博文判断是否已经点赞
    返回值:
    True:已经点赞或读取报文失败
    False:未点赞
    """
    
    req = urllib.request.Request(url=url,headers=header)
    try: text = urllib.request.urlopen(req).read().decode()  
    except Exception: 
        print(f"读取 {url} 内容解码判断是否点赞失败,失败原因:
{e}")   
    soup = BeautifulSoup(text, 'lxml')
   
    button1 = soup.select("button[title='点赞']")
    button2 = soup.select("button[title='取消点赞']")
    if button1: return False
    elif button2:return True
   
    
def thumbsup(url):
    """
    对指定url的cdn博文点赞
    url:需要点赞文章的url 
    """
    
    #判断该博文是否已经点赞过
    header = mkhead()
    thumbsuped = isthumbsup(url,header)
    if thumbsuped: 
        print(f"{url} 已点赞!")
        return 2
    thumbsupUrl = getthumbsupURL(url)    
    req = urllib.request.Request(url=thumbsupUrl,headers=header)
    text = urllib.request.urlopen(req).read().decode()

    if  text.find('"status":true')>=0:
        print(f"{url} 点赞成功!")
        return 1
    else:
        print(f"{url} 点赞失败!")
        return 0
        
        
def batchthumbsup(filename):
    count = 0
    for line in fileinput.input(filename):
        urlline = line.strip(' 
')
        thumbsup(urlline) 
        count+=1
        if count>=5:break       
        time.sleep(1)     
 
batchthumbsup(r'c:	empurllist.txt')


  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19
  • 20
  • 21
  • 22
  • 23
  • 24
  • 25
  • 26
  • 27
  • 28
  • 29
  • 30
  • 31
  • 32
  • 33
  • 34
  • 35
  • 36
  • 37
  • 38
  • 39
  • 40
  • 41
  • 42
  • 43
  • 44
  • 45
  • 46
  • 47
  • 48
  • 49
  • 50
  • 51
  • 52
  • 53
  • 54
  • 55
  • 56
  • 57
  • 58
  • 59
  • 60
  • 61
  • 62
  • 63
  • 64
  • 65
  • 66
  • 67
  • 68
  • 69
  • 70
  • 71
  • 72
  • 73
  • 74
  • 75
  • 76
  • 77
  • 78
  • 79
  • 80
  • 81
  • 82
  • 83
  • 84
  • 85
  • 86
  • 87
  • 88
  • 89

大家将上述代码拷贝存入一个py文件中,并将其中的cookie替换为自己登陆的cookie信息,就可以以自己的账户给他人博文点赞了。不过注意,为了保持代码简洁,老猿都没有加异常处理,真正实现时最好加上。

老猿Python,跟老猿学Python!
博客地址:http://iyenn.com/index/link?url=https://blog.csdn.net/LaoYuanPython

老猿Python博客文章目录:http://iyenn.com/rec/324322.html
请大家多多支持,点赞、评论和加关注!谢谢!

文章知识点与官方知识档案匹配,可进一步学习相关知识
Python入门技能树网络爬虫Beautiful Soup333550 人正在系统学习中
老猿Python
微信公众号
专注Python相关语言、图像音视频处理、AI
注:本文转载自blog.csdn.net的LaoYuanPython的文章"https://blog.csdn.net/LaoYuanPython/article/details/100890443"。版权归原作者所有,此博客不拥有其著作权,亦不承担相应法律责任。如有侵权,请联系我们删除。
复制链接
复制链接
相关推荐
发表评论
登录后才能发表评论和回复 注册

/ 登录

评论记录:

未查询到任何数据!
回复评论:

分类栏目

后端 (14832) 前端 (14280) 移动开发 (3760) 编程语言 (3851) Java (3904) Python (3298) 人工智能 (10119) AIGC (2810) 大数据 (3499) 数据库 (3945) 数据结构与算法 (3757) 音视频 (2669) 云原生 (3145) 云平台 (2965) 前沿技术 (2993) 开源 (2160) 小程序 (2860) 运维 (2533) 服务器 (2698) 操作系统 (2325) 硬件开发 (2491) 嵌入式 (2955) 微软技术 (2769) 软件工程 (2056) 测试 (2865) 网络空间安全 (2948) 网络与通信 (2797) 用户体验设计 (2592) 学习和成长 (2593) 搜索 (2744) 开发工具 (7108) 游戏 (2829) HarmonyOS (2935) 区块链 (2782) 数学 (3112) 3C硬件 (2759) 资讯 (2909) Android (4709) iOS (1850) 代码人生 (3043) 阅读 (2841)

热门文章

101
推荐
关于我们 隐私政策 免责声明 联系我们
Copyright © 2020-2025 蚁人论坛 (iYenn.com) All Rights Reserved.
Scroll to Top