极验反爬虫防护分析之交互流程分析

本文要分享的内容是去年为了抢鞋而分析极验(GeeTest)反爬虫防护的笔记，由于篇幅较长(为了多混点CB)我会按照我的分析顺序，分成如下四个主题与大家分享:

本篇是第一篇，下面进入正文~

极验(http://www.geetest.com/)，是国内比较有名的身份验证，反爬虫的产品。其反爬虫的手段较多，大概分为: pencil、beeline、click、slide、voice 等多种验证方式，尤其Slide方式是基于大数据的智能行为验证，用户体验较好很得客户青睐，比如我要抢鞋的官网就是基于它来做用户登录的身份验证。

通过极验官网的文档，我们可以得知Geetest的大致交互流程如下图:

结合我抢鞋的接口，整理如下:

1. 获取验证ID及验证流水号

请求地址: https://www.nike.com.hk/geetest/doget.json?t=1563879949387&type=MEMBER_LOGIN
请求方式: POST
请求参数说明:
1. t: 当前时间戳(毫秒)

响应内容:

{
        "challenge": "decd09d6c9f1bb219f7550cea8e18c01",
        "gt": "2328764cdf162e8e60cc0b04383fef81",
        "success": 1
}

返回参数说明:
1. gt: 验证id
2. challenge: 验证流水号

2. 获取验证素材资源

请求地址: https://api.geetest.com/gettype.php?gt=2328764cdf162e8e60cc0b04383fef81&callback=geetest_1563879954116
请求方式: GET
请求参数说明:
1. gt: 之前接口返回的验证ID

响应内容:

{
        "status": "success",
        "data": {
                "maze": "/static/js/maze.1.0.1.js",
                "fullpage": "/static/js/fullpage.8.7.9.js",
                "geetest": "/static/js/geetest.6.0.9.js",
                "pencil": "/static/js/pencil.1.0.3.js",
                "click": "/static/js/click.2.8.1.js",
                "beeline": "/static/js/beeline.1.0.1.js",
                "type": "fullpage",
                "static_servers": ["static.geetest.com/", "dn-staticdown.qbox.me/"],
                "aspect_radio": {
                        "beeline": 50,
                        "voice": 128,
                        "pencil": 128,
                        "click": 128,
                        "slide": 103
                },
                "voice": "/static/js/voice.1.2.0.js",
                "slide": "/static/js/slide.7.6.0.js"
        }
}

示例:
1. https://static.geetest.com/static/js/fullpage.8.7.9.js
2. https://static.geetest.com/static/js/geetest.6.0.9.js

3. 获取验证的基本参数

请求地址: https://api.geetest.com/get.php?gt=2328764cdf162e8e60cc0b0438...
请求方式: GET
请求参数说明:
1. gt: 之前接口返回的验证ID
2. challenge: 之前接口返回的验证流水号
3. lang=zh-hk
4. pt=0
5. w=4A8S6ZFe9GO43hbI3exYdbebCvxWVtD38od3qc7tqtxxARm4HCI... (待分析)
6. callback=回调函数的方法名

响应内容:

{
        "status": "success",
        "data": {
                "i18n_labels": {
                        "fullpage": "验证进行中, 请耐心等候",
                        "goto_homepage": "前往验证服务 Geetest 官方网站",
                        "goto_confirm": "前往",
                        "success": "验证成功",
                        "error_content": "请轻触重试",
                        "copyright": "Geetest",
                        "refresh_page": "页面出现错误！要继续操作，请重新整理此页面",
                        "loading_content": "智能验证中",
                        "next_ready": "请完成验证",
                        "error_title": "网络逾时",
                        "next": "载入中",
                        "error": "网络不佳",
                        "reset": "重试",
                        "goto_cancel": "取消",
                        "ready": "按此进行验证 ",
                        "success_title": "验证通过"
                },
                "s": "326b4e30",
                "theme": "wind",
                "static_servers": ["static.geetest.com", "dn-staticdown.qbox.me"],
                "feedback": "",
                "c": [12, 58, 98, 36, 43, 95, 62, 15, 12],
                "theme_version": "1.5.5",
                "api_server": "api.geetest.com",
                "logo": false
        }
}

4. 获取验证方式

请求地址: https://api.geetest.com/ajax.php?gt=2328764cdf162e8e60cc0b0438...
请求方式: GET
请求参数说明:
1. gt: 之前接口返回的验证ID
2. challenge: 之前接口返回的验证流水号
3. lang=zh-hk
4. pt=0
5. w=pxIvtqzNcdSbk0QJHeRBsozbYtm8519UAKjSyuCMk01J21VwEEWOlV... (待分析)
6. callback=回调函数的方法名

响应内容:

{
        "status": "success",
        "data": {
                "result": "slide"
        }
}

5. 获取验证素材信息

请求地址: https://api.geetest.com/get.php?is_next=true&type=slide3>=2328764...
请求方式: GET
请求参数说明:
1. gt: 之前接口返回的验证ID
2. challenge: 之前接口返回的验证流水号
3. lang=zh-hk
4. is_next=true
5. type=slide3
6. https=false
7. protocol=https://
8. offline=false
9. product=embed
10. api_server=api.geetest.com
11. isPC=true
12. width=100%
13. callback=回调函数的方法名

响应内容:

{
        "benchmark": false,
        "xpos": 0,
        "slice": "pictures/gt/0191efce3/slice/8eba80808.png",
        "gt": "2328764cdf162e8e60cc0b04383fef81",
        "ypos": 27,
        "api_server": "https://api.geetest.com/",
        "theme": "ant",
        "link": "",
        "template": "",
        "id": "adecd09d6c9f1bb219f7550cea8e18c01",
        "version": "6.0.9",
        "product": "embed",
        "mobile": true,
        "width": "100%",
        "hide_delay": 800,
        "static_servers": ["static.geetest.com/", "dn-staticdown.qbox.me/"],
        "so": 0,
        "bg": "pictures/gt/0191efce3/bg/8eba80808.jpg",
        "type": "multilink",
        "height": 160,
        "https": true,
        "theme_version": "1.2.3",
        "challenge": "decd09d6c9f1bb219f7550cea8e18c01eb",
        "fullbg": "pictures/gt/0191efce3/0191efce3.jpg",
        "clean": false,
        "i18n_labels": {
                "error": "出现错误，请关闭验证重试",
                "tip": "",
                "voice": "视觉障碍",
                "success": "sec 秒.超过 score% 的使用者",
                "slide": "拉动左边标示完成上方拼图",
                "forbidden": "哇～怪物吃了拼图，请 3 秒后重试",
                "close": "关闭验证",
                "fail": "拼图位置不正确",
                "cancel": "取消",
                "feedback": "说明和反馈",
                "loading": "载入中...",
                "logo": "Geetest",
                "refresh": "重新载入"
        },
        "s": "6e4d352f",
        "c": [12, 58, 98, 36, 43, 95, 62, 15, 12],
        "feedback": "",
        "fullpage": false,
        "logo": false,
        "show_delay": 250
}

响应参数说明:

6. 提交验证请求

请求地址: https://api.geetest.com/ajax.php?gt=2328764cdf162e8e60cc0b...
请求方式: GET
请求参数说明:
1. gt: 之前接口返回的验证ID
2. challenge: 第六步返回的验证流水号
3. lang=zh-hk
4. pt=0
5. w=cY71fua4Cuvs8Cyrf3rW(VzZHB)oSpARQMV65Dtg... (待分析)

响应内容:

{
        "valIDAte": "545a86f1a2af6f09afc4d1abbb166679",
        "success": 1,
        "score": "5",
        "message": "success"
}

7. 提交登录认证

请求地址: https://www.nike.com.hk/member/login.json?loxiaflag=1563879969519
请求方式: POST
请求参数说明:
1. loginName: [email protected]
2. countryCode:
3. password=EJ2JjA3Rw32DrDMHI1Biu7+YKevYJhvU2EyllSQ... (加密后的密码待分析)
4. passwordAgain=EJ2JjA3Rw32DrDMHI1Biu7+YKevYJhvU2EyllSQ... (加密后的密码待分析)
5. rememberLoginName=checked
6. type
7. geetest_challenge=decd09d6c9f1bb219f7550cea8e18c01eb (第六步返回的验证流水号)
8. geetest_validate=545a86f1a2af6f09afc4d1abbb166679 (第七步返回的validate)
9. geetest_seccode=545a86f1a2af6f09afc4d1abbb166679|jordan (第七步返回的validate|jordan)

响应内容:

{
    "email": "[email protected]",
    "firstName": "大头",
    "loginRedirectPath": "/",
    "memberCommand": {
        "addEmail": null,
        "address": null,
        "behaviorScore": null,
        "birthday": null,
        "birthdayStr": null,
        "businessPartnerName": null,
        "captcha": null,
        "cardNo": null,
        "certNo": null,
        "certType": null,
        "childrenNum": null,
        "city": null,
        "copExt1": null,
        "corpDepartment": null,
        "corpPosition": null,
        "corporation": null,
        "corporationCode": null,
        "corporationName": null,
        "country": null,
        "countryCode": "",
        "createTime": null,
        "createType": null,
        "currPoint": null,
        "district": null,
        "educationLvl": null,
        "email": null,
        "familyNum": null,
        "firstName": null,
        "gender": null,
        "height": null,
        "homePage": null,
        "id": null,
        "invitecode": null,
        "invitor": null,
        "isBookEmail": null,
        "isBookMobileMessage": null,
        "isCorpSeed": null,
        "isDefault": null,
        "isFacebook": false,
        "isInviteSeed": null,
        "isMobileValidated": null,
        "isPrivacyPolicy": null,
        "isRecEmail": null,
        "keyPassword": null,
        "lastName": null,
        "lifeCycleStatus": null,
        "lifeCycleStatusDesc": null,
        "loginName": "[email protected]",
        "marriage": null,
        "memberAttention": null,
        "memberCode": null,
        "memberRank": null,
        "memberType": null,
        "mobile": null,
        "msn": null,
        "nickname": null,
        "onboardDate": null,
        "password": "A046803714a",
        "passwordAgain": "EJ2JjA3Rw32DrDMHI1Biu7+YKevYJhvU2EyllSQCmm5fp+QRaVvlz8AfztnM2u0r8Etx3LoBnverg1myEh5lq9HNCEA5aMeHSNX6bR7oJfkkMRqR3XSZdM+0ineNUnHnVuSNnHLbCIxAoecRjDkUSC/umq8+QE9a3X0DOB6SUm8=",
        "pet": null,
        "province": null,
        "pwdAnswer": null,
        "pwdQuestion": null,
        "qq": null,
        "rankId": null,
        "rankName": null,
        "realName": null,
        "regSource": null,
        "registerIp": null,
        "remark": null,
        "salary": null,
        "secondLang": null,
        "securityCode": null,
        "sendemail": null,
        "smsCode": null,
        "supervisor": null,
        "sysUser": null,
        "telephone": null,
        "token": null,
        "totalPoint": null,
        "usedPoint": null,
        "version": null,
        "weight": null,
        "yearsOfWork": null,
        "zipcode": null
    },
    "mobileNumber": "+86 18660278523",
    "omnitureProp31": 3443350,
    "org.springframework.validation.BindingResult.memberCommand": {
        "errorCount": 0,
        "fieldError": null,
        "fieldErrorCount": 0,
        "globalError": null,
        "globalErrorCount": 0,
        "nestedPath": "",
        "objectName": "memberCommand"
    }
}

8. 验证流程整理

经测试不需要所有接口都模拟，比如直接指定验证方式为滑块验证，依次调用接口: 1 --> 3 --> 5 --> 6 --> 7 即可。

至此，整个交互流程分析完毕，产生的问题如下:

所有用于验证的代码都是混淆之后的，如何进行代码还原或者调试分析。
请求与返回的关键数据都是加密的后的字符串如上述3、4、6等接口中的W参数，如何解密。

限于篇幅，本文先写到这里，上述两个问题的解决方法请参考下篇文章《极验反爬虫防护分析之接口交互的解密方法》

转载：https://www.52pojie.cn/thread-1162853-1-1.html

极验反爬虫防护分析之交互流程分析

1. 获取验证ID及验证流水号

2. 获取验证素材资源

3. 获取验证的基本参数

4. 获取验证方式

5. 获取验证素材信息

6. 提交验证请求

7. 提交登录认证

8. 验证流程整理

如何使用 JS 判断用户是否处于活跃状态

Mono 支持LoongArch架构

lightdb秒级增加列和删除列（not null带默认值）

lightdb数据库超时相关控制参数

通过HPA+CronHPA组合应对业务复杂弹性伸缩场景

❤️‍🔥 Solon Cloud Event 新的事务特性与应用

网络爬虫的秘密：如何高效地抓取JD.com视频链接

lightdb mysql 8.0兼容之不可见主键

使用 JS 实现在浏览器控制台打印图片 console.image()

基于Ubuntu-22.04安装K8s-v1.28.2实验（四）使用域名访问网站应用

Raspberry bullseye (Debian 11) 安裝 omxplayer

Raspberry Pi OS 開啓 root 用戶並設置爲默認自動登錄

Selenium(Pyppeteer)模擬瀏覽器如何正確隱藏特徵

Python3 使用IMAP接收郵件

樹莓派/RaspberryPi 內核編譯

https://yachay.unat.edu.pe/blog/index.php?comment_area=format_blog&comment_component=blog&comment_co

linux以太網驅動總結