具体代码如下所示:
#coding:utf-8 #!/usr/bin/python3 from selenium import webdriver import time import re import importlib2 import sys importlib2.reload(sys) def startSpider(): driver = webdriver.Chrome('/Users/zachary/zachary/chromedriver.exe') #这个是chormedriver的地址 driver.get('https://qzone.qq.com/') driver.switch_to.frame('login_frame') driver.find_element_by_id('switcher_plogin').click() driver.find_element_by_id('u').clear() driver.find_element_by_id('u').send_keys('QQ号') #这里填写你的QQ号 driver.find_element_by_id('p').clear() driver.find_element_by_id('p').send_keys('QQ密码') #这里填写你的QQ密码 driver.find_element_by_id('login_button').click() time.sleep(2) #设置爬取内容保存路径 f = open('/Users/zachary/Documents/shuoshuo.txt','w') #---------------获得g_qzonetoken 和 gtk html = driver.page_source '''g_qzonetoken=re.search('window\.g_qzonetoken = \(function\(\)\{ try\{return (.*"e794139a284d6ea9e0b26826e541b55df37d0667a3544f534de25aebdb64628d3ab75e1d7104bbb22a" cookie = {}#初始化cookie字典 for elem in driver.get_cookies():#取cookies cookie[elem['name']] = elem['value'] gtk=getGTK(cookie)#通过getGTK函数计算gtk #print(g_qzonetoken) #print(gtk) #--------------获得好友列表 注意下面的链接 driver.get('https://user.qzone.qq.com/proxy/domain/r.qzone.qq.com/cgi-bin/tfriend/friend_hat_get.cgi"(.\d*)\":\{\\n"realname":"(.*"}',re.S) QQ_name_list = re.findall(abtract_pattern,str(friend_list)) #数组 print(QQ_name_list) numList=dict()# numList => (QQnum:QQname) #列表 for i in QQ_name_list: numList[str(i[0])]=str(i[1]) begin = 0 last_source = "" tag = 1 first = 0 firstTime="" #如果要爬取自己的说说,手动添加自己的qq号 #numList['你的qq号']='你的名字' #print(numList) for key in numList.keys(): QQnum = key QQname = numList[QQnum] if QQnum == "好友qq号": #根据qq号查找指定好友说说 count = 1 begin = 0 while tag==1 : #-------------进入好友说说页面 #'+QQnum+' '+str(begin)+' #print("Begin:"+str(begin)) driver.get('https://user.qzone.qq.com/proxy/domain/taotao.qq.com/cgi-bin/emotion_cgi_msglist_v6"message":"(.*","name":',re.S) message = re.findall(abtract_pattern,str(msg_list_json)) if message!=[]: if str(message[0])=='对不起,主人设置了保密,您没有权限查看':#对不起,主人设置了保密,您没有权限查看 break #print(msg_list_json) #解析JSON #webDriver没有现成的JSON解析器,所以采用获取源码的方式,然后使用正则表达式获取具体细节 msg_list_json = msg_list_json.split("msglist")[1]#拆分json,缩小范围,也能加快解析速度 msg_list_json = msg_list_json.split("smoothpolicy")[0] msg_list_json = msg_list_json.split("commentlist")[1:] #说说动态分4种:1、文字说说(或带有配图的文字说说) # 2、只有图片的说说 # 3、转发,并配有文字 # 4、转发,不配文字 for text in msg_list_json: # 1、先检查说说,用户是否发送了文字,如果没有文字,正则表达式匹配无效 abtract_pattern = re.compile('\}\],"content":"(.*","createTime":"(.*","created_time":(.*"',re.S) msg_time = re.findall(abtract_pattern,str(text)) if msg_time!=[]: # 2、如果作者说说有文字,那么检查是否有转发内容 msg = str(msg_time[0][0]) sendTime = str(msg_time[0][1]) abtract_pattern = re.compile('\}\],"content":"(.*"},"rt_createTime":"(.*","',re.S) text = text.split("created_time")[1] msg_time2 = re.findall(abtract_pattern,str(text)) #合并发送内容 格式:评论+转发内容 if msg_time2!=[]: msg = msg +" 转发内容:"+str(msg_time2[0][0]) else: # 3、说说内容为空,检查是否为 =>只有图片的说说 or 转发,不配文字 #获取正文发送时间 (发送时间分为:正文发送时间 or 转发时间) abtract_pattern = re.compile('"conlist":null,"content":"","createTime":"(.*",',re.S) msgNull_time = re.findall(abtract_pattern,str(text)) if msgNull_time!=[]: #如果有正文发送时间,那么就是这条说说仅含有图片 =>只有图片的说说 msg = "图片" sendTime = str(msgNull_time[0]) else: #如果没有正文发送时间,那么就是说这条说为 =>转发,不配文字 abtract_pattern = re.compile('\}\],"content":"(.*"},"rt_createTime":"(.*","',re.S) msg_time = re.findall(abtract_pattern,str(text)) msg =" 转发内容:"+str(msg_time[0][0]) sendTime = str(msg_time[0][1]) #写入本地文件 #f.write('{},{},{},{}\n'.format(str(QQname),str(QQnum),sendTime,msg)) print(str(count)+" : "+str(QQname)+" : "+str(QQnum)+" : "+sendTime+" : "+msg) count = count + 1 begin = begin + 40 def getGTK(cookie): hashes = 5381 for letter in cookie['p_skey']: hashes += (hashes << 5) + ord(letter) return hashes & 0x7fffffff startSpider() print("爬取结束")
总结
以上所述是小编给大家介绍的Python爬取qq空间说说的实例代码,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对网站的支持!
广告合作:本站广告合作请联系QQ:858582 申请时备注:广告合作(否则不回)
免责声明:本站资源来自互联网收集,仅供用于学习和交流,请遵循相关法律法规,本站一切资源不代表本站立场,如有侵权、后门、不妥请联系本站删除!
免责声明:本站资源来自互联网收集,仅供用于学习和交流,请遵循相关法律法规,本站一切资源不代表本站立场,如有侵权、后门、不妥请联系本站删除!
暂无评论...
稳了!魔兽国服回归的3条重磅消息!官宣时间再确认!
昨天有一位朋友在大神群里分享,自己亚服账号被封号之后居然弹出了国服的封号信息对话框。
这里面让他访问的是一个国服的战网网址,com.cn和后面的zh都非常明白地表明这就是国服战网。
而他在复制这个网址并且进行登录之后,确实是网易的网址,也就是我们熟悉的停服之后国服发布的暴雪游戏产品运营到期开放退款的说明。这是一件比较奇怪的事情,因为以前都没有出现这样的情况,现在突然提示跳转到国服战网的网址,是不是说明了简体中文客户端已经开始进行更新了呢?
更新日志
2024年11月26日
2024年11月26日
- 凤飞飞《我们的主题曲》飞跃制作[正版原抓WAV+CUE]
- 刘嘉亮《亮情歌2》[WAV+CUE][1G]
- 红馆40·谭咏麟《歌者恋歌浓情30年演唱会》3CD[低速原抓WAV+CUE][1.8G]
- 刘纬武《睡眠宝宝竖琴童谣 吉卜力工作室 白噪音安抚》[320K/MP3][193.25MB]
- 【轻音乐】曼托凡尼乐团《精选辑》2CD.1998[FLAC+CUE整轨]
- 邝美云《心中有爱》1989年香港DMIJP版1MTO东芝首版[WAV+CUE]
- 群星《情叹-发烧女声DSD》天籁女声发烧碟[WAV+CUE]
- 刘纬武《睡眠宝宝竖琴童谣 吉卜力工作室 白噪音安抚》[FLAC/分轨][748.03MB]
- 理想混蛋《Origin Sessions》[320K/MP3][37.47MB]
- 公馆青少年《我其实一点都不酷》[320K/MP3][78.78MB]
- 群星《情叹-发烧男声DSD》最值得珍藏的完美男声[WAV+CUE]
- 群星《国韵飘香·贵妃醉酒HQCD黑胶王》2CD[WAV]
- 卫兰《DAUGHTER》【低速原抓WAV+CUE】
- 公馆青少年《我其实一点都不酷》[FLAC/分轨][398.22MB]
- ZWEI《迟暮的花 (Explicit)》[320K/MP3][57.16MB]