當(dāng)前位置：首頁 > 编程资源 > 编程问答 >内容正文

编程问答

记录openlaw的反爬

發(fā)布時(shí)間：2023/12/14 编程问答 23 豆豆

生活随笔收集整理的這篇文章主要介紹了记录openlaw的反爬小編覺得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.

地址：http://openlaw.cn/login.jsp

需要登陸，找到Form data

根據(jù)提交數(shù)據(jù)可以知道需要找到_csrf和加密后的password，_csrf由服務(wù)器生成，在登陸頁面

接下來找加密password的js代碼，ctrl+F搜索password，可以看出password在加密后重新填入input再提交

找到加密函數(shù)KeyEncrypt

復(fù)制到snippets調(diào)試，調(diào)用了JSEncrypt，CryptoJs，繼續(xù)搜索

全都復(fù)制加到snippets里執(zhí)行

這樣就獲得了加密passwoed的js代碼，接下來需要讓這段代碼在python里執(zhí)行，可以用execjs和js2py，推薦用execjs

把snippets的代碼復(fù)制出來另存為js，用execjs執(zhí)行

要注意運(yùn)行時(shí)環(huán)境，如果是node.js或Jscript都會(huì)報(bào)錯(cuò)：navigator is not define，nodejs和Jscript都不是瀏覽器，可以用PhantomJS。

#運(yùn)行時(shí)環(huán)境設(shè)置
import execjs import execjs.runtime_names os.environ["EXECJS_RUNTIME"] = "PhantomJS" PhantomJS = execjs.get(execjs.runtime_names.PhantomJS) print(execjs.get().name)

js文件路徑前要加r，加密密碼結(jié)果如圖

因?yàn)閏sfr和post data在兩頁，所以需要一起運(yùn)行

#獲取csfr
headers={ "Accept":"text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3", "Accept-Encoding":"gzip,deflate", "Accept-Language":"zh-CN,zh;q=0.9", "Cache-Control":"max-age=0", "Connection":"keep-alive", "Content-Type":"application/x-www-form-urlencoded", "Host":"openlaw.cn", "Upgrade-Insecure-Requests":"1", "User-Agent":"Mozilla/5.0(WindowsNT10.0;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/73.0.3683.86Safari/537.36", } r=session.get("http://openlaw.cn/login.jsp?",headers=headers1) tree=etree.HTML(r.text) csrf=tree.xpath('//input[@name="_csrf"]/@value')[0]

#post form data post_url="http://openlaw.cn/login" with open(r"C:\Users\37576\Desktop\123.js",encoding="utf-8")as f:js=f.read()ctx = execjs.compile(js)pwd=ctx.call("keyEncrypt","XXXXXXXX")#密碼 data={ "_csrf":csrf, "username":"#########",#賬戶 "password":pwd, "_spring_security_remember_me":"true", } res=session.post(post_url,data=data,headers=headers)

?tree=etree.HTML(res.text)
?lala=tree.xpath('//div[@class="bbp-user-section"]//text()')

登陸成功

接下來分析抓取頁面

url="http://openlaw.cn/guidance/16444eba67afe97881fa6521d333ef10" headers1={ "Accept":"text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3", "Accept-Encoding":"gzip,deflate", "Accept-Language":"zh-CN,zh;q=0.9", "Connection":"keep-alive", "Host":"openlaw.cn", "Upgrade-Insecure-Requests":"1", "User-Agent":"Mozilla/5.0(WindowsNT10.0;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)Chrome/73.0.3683.86Safari/537.36", } a=session.get(url,headers=headers1)

抓取結(jié)果全是亂碼

用火狐瀏覽器抓包分析

第一頁與剛才抓到的頁面一樣，第二頁有數(shù)據(jù)，在第一頁面下面

對比分析發(fā)現(xiàn)請求地址一樣，但cookie不一樣，參考資料了解到是js加密cookie，帶新cookie的請求才能顯示正確頁面，所以需要找到添加cookie的js代碼

查資料得知下面這種加密叫jjencode，jjencodeDemo地址：http://utf-8.jp/public/jjencode.html

],_$_:++$,$_$$:({}+"")[$],$$_$:($[$]+"")[$],_$$:++$,$$$_:(!""+"")[$],$__:++$,$_$:++$,$$__:({}+"")[$],$$_:++$,$$$:++$,$___:++$,$__$:++$};$.$_=($.$_=$+"")[$.$_$]+($._$=$.$_[$.__$])+($.$$=($.$+"")[$.__$])+((!$)+"")[$._$$]+($.__=$.$_[$.$$_])+($.$=(!""+"")[$.__$])+($._=(!""+"")[$._$_])+$.$_[$.$_$]+$.__+$._$+$.$;$.$$=$.$+(!""+"")[ #這種加密叫jsfunk，地址是：http://www.jsfuck.com/
+[]+!+[]+!+[]]+(!![]+[])[+!+[]]]+[])[!+[]+!+[]+!+[]]+(!![]+[][(![]+[])[+[]]+([![]]+[][[]])[+!+[]+[+[]]]+(![]+[])[!+[]+!+[]]+(!![]+[])[+[]]+(!![]+[])[!+[]+!+[]+!+[]]+(!![]+[])[+!+[]]])[+!+[]+[+[]]]+([][[]]+[])[+!+[]]+(![]+[])[!+[]+!+[]+!+[]]+(!![]+[])[+[]]+(!![]+[])[+!+[]]+([][[]]

下面是aaencode，地址是http://utf-8.jp/public/aaencode.html

ﾟωﾟﾉ= /｀ｍ′）ﾉ ~┻━┻ //*′?｀*/ ['_']; o=(ﾟｰﾟ) =_=3; c=(ﾟΘﾟ) =(ﾟｰﾟ)-(ﾟｰﾟ); (ﾟДﾟ) =(ﾟΘﾟ)= (o^_^o)/ (o^_^o);(ﾟДﾟ)={ﾟΘﾟ: '_' ,ﾟωﾟﾉ : ((ﾟωﾟﾉ==3) +'_') [ﾟΘﾟ] ,ﾟｰﾟﾉ :(ﾟωﾟﾉ+ '_')[o^_^o -(ﾟΘﾟ)] ,ﾟДﾟﾉ:((ﾟｰﾟ==3) +'_')[ﾟｰﾟ] }; (ﾟДﾟ) [ﾟΘﾟ] =((ﾟωﾟﾉ==3) +'_') [c^_^o];(ﾟДﾟ) ['c'] = ((ﾟДﾟ)+'_') [ (ﾟｰﾟ)+(ﾟｰﾟ)-(ﾟΘﾟ) ];

加密原理百度

代碼在可以執(zhí)行獲得內(nèi)容或者找工具解密成明文

(function anonymous() {if (window.wp1) {document.cookie = 'OPEN_E4C0C08491=' + wp3;document.cookie = 'OPEN_ID=B32pJOwfO/AJZJ3ZGmnunQNTaUie84jnyHoNCq/onZQ='} } )

代碼有添加cookie，第二行拉出來單獨(dú)執(zhí)行

有報(bào)錯(cuò)但得到了解析后的代碼

頁面上所以js代碼如下：

有六條cookie修改完后通過location.reload()刷新頁面，帶著新cookie刷新后的頁面能訪問到有數(shù)據(jù)的頁面

接下來需要把js代碼拉出來執(zhí)行獲得cookie，但是有一點(diǎn)問題就是cookie數(shù)據(jù)：OPEN_E4C0C08491，OPEN_ID，SIGNIN_ID，UNDEFINED，OPEN_589D5869B5不知道從哪里來的，找了很久都沒找到

沒有這些數(shù)據(jù)就沒辦法寫cookie，就此卡住。。。等水平提高再來解決

為了獲取頁面數(shù)據(jù)，下面用selenium解決該問題

#配置chorme無頭瀏覽器
from selenium import webdriver from selenium.webdriver.chrome.options import Options chrome_options = Options() chrome_options.add_argument('--headless') driver = webdriver.Chrome(chrome_options=chrome_options,executable_path = 'D:\python\chromedriver.exe') from time import sleep #登陸賬號(hào)
driver.get("http://openlaw.cn/login.jsp?logout") driver.find_element_by_id("username").send_keys("XXXXXXXXX") driver.find_element_by_id("password").send_keys("XXXXXXXXX") sleep(2) driver.find_element_by_id("submit").click() #獲取頁面數(shù)據(jù)
driver.get("http://openlaw.cn/guidance/167ce490ba94c3ed26baab5689fdd620") sleep(2) title=driver.find_element_by_xpath('//h1[@class="entry-title"]').text guid=driver.find_element_by_xpath('//div[@class="annotator-wrapper"]/p').text content=driver.find_element_by_xpath('//div[@class="annotator-wrapper"]/p[2]').text page_detail={"title":title,"content":guid+"\n"+content.replace("\u3000"," ")}

結(jié)果

小結(jié)

1.RSA學(xué)習(xí)地址：https://blog.csdn.net/u014044812/article/details/80782448

2.用代理或訪問頻率異常會(huì)頻繁出現(xiàn)驗(yàn)證碼

3.訪問有資源的網(wǎng)頁時(shí)服務(wù)器會(huì)驗(yàn)證cookie，如果不帶有特定cookie訪問，網(wǎng)頁會(huì)轉(zhuǎn)到空白頁執(zhí)行js代碼添加cookie，然后302或reload帶著新cookie重新請求出有數(shù)據(jù)的頁面

4.常見的js混淆方式

5.還不熟練js調(diào)試用法，等水平提高繼續(xù)破解該反爬

轉(zhuǎn)載于:https://www.cnblogs.com/shenyiyangle/p/10743133.html

總結(jié)

以上是生活随笔為你收集整理的记录openlaw的反爬的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。

openlaw

上一篇：连接校园网的路由器为啥老是服务器没响应,
下一篇： Microsoft office 各个版