当前位置:网站首页>Analyse du format protobuf du rideau en temps réel et du rideau historique de la station B
Analyse du format protobuf du rideau en temps réel et du rideau historique de la station B
2022-07-06 15:59:00 【Attrapez le voleur, attrapez le roi en premier.】
RÉFÉRENCES:
- https://zhuanlan.zhihu.com/p/392931611
- https://gitee.com/nbody1996/bilibili-API-collect/blob/master/danmaku/danmaku_proto.md
- Bilibili Rideau d'histoire:https://www.cnblogs.com/mollnn/p/14964905.html
bLe format de transmission du rideau de station est transmis par xml A la place protobuf,Ce format est une transmission codée binaire,Les ventes de transport sont beaucoup plus élevées xml,Par conséquent, il est avantageux de réduire la pression du réseau sur l'extrémité mobile..Mais l'un des problèmes est,Ce format est très difficile à analyser,Généralement à partir de api Les données obtenues sont directement codées.,Il faut des moyens spécifiques pour voir le vrai contenu,Ça fait mal à la tête.
B Station non utilisée protobuf Interface pop - up avant le Protocole
1、Qu'est - ce que Protobuf
Protocol buffers are Google's language-neutral, platform-neutral, extensible mechanism for serializing structured data – think XML, but smaller, faster, and simpler. You define how you want your data to be structured once, then you can use special generated source code to easily write and read your structured data to and from a variety of data streams and using a variety of languages.
Ce passage vient de Google Protobuf Introduction au site officiel,C'est simplement un Protocole de transmission,Que xml Plus petit、Plus vite.、Plus simple.,Pour plus d'informations, voir:https://developers.google.com/protocol-buffers/
2、Comment analyser Protobuf Le rideau
2.1 Télécharger Protoc Compilateur
Protoc Est utilisé pour .proto Les fichiers sont compilés dans différents langages de programmation(Par exemple: Python、Golang Attendez.)Compilateur pour,Oui. Protobuf Conditions nécessaires à l'analyse,Disponible en téléchargement sur le lien ci - dessous:https://github.com/protocolbuffers/protobuf
Une fois le téléchargement terminé, décompresser est exe Documentation,Aucune installation requise,Mais doit être ajouté manuellement à Path Moyenne.
Déterminer si l'installation a été réussie en exécutant le code suivant dans le terminal:protoc --version
2.2 Télécharger Protobuf-Python Afin de Python Résolution moyenne Protobuf
Télécharger l'adresse:https://github.com/protocolbuffers/protobuf
Décompresser une fois le téléchargement terminé,Puis entrez python Entrée dans le Répertoire,
Exécutez le Code de ligne de commande suivant:
python setup.py clean
python setup.py build
python setup.py install
python setup.py test
2.3 Le rideau proto Définir et compiler
Format du rideau,protobuf Structure:
dm.proto
syntax = "proto3";
package dm;
message DmSegMobileReply{
repeated DanmakuElem elems = 1;
}
message DanmakuElem{
int64 id = 1;
int32 progress = 2;
int32 mode = 3;
int32 fontsize = 4;
uint32 color = 5;
string midHash = 6;
string content = 7;
int64 ctime = 8;
int32 weight = 9;
string action = 10;
int32 pool = 11;
string idStr = 12;
}
Nom | Sens | Type | Remarques |
---|---|---|---|
id | Rideau d'obusdmID | int64 | Unique Disponible pour les paramètres de fonctionnement |
progress | Heure d'apparition de l'écran dans la vidéo | int32 | MS |
mode | Type de rideau | int32 | 1 2 3:Un écran ordinaire 4:Le rideau inférieur 5:Haut du rideau 6:Écran inversé 7:Haut de gamme 8:Écran de code 9:BASRideau d'obus |
fontsize | Taille du rideau | int32 | 18:Petit 25:Critères 36:Grand |
color | Couleur du rideau | uint32 | DécimalRGB888Valeur |
midHash | ExpéditeurUIDDeHASH | string | Pour masquer l'utilisateur et voir tous les écrans envoyés par l'utilisateur Vous pouvez également inverser la recherche de l'utilisateurID |
content | Contenu du rideau | string | utf-8Codage |
ctime | Temps d'envoi du rideau | int64 | Horodatage |
weight | Poids | int32 | Pour le niveau de blindage intelligent |
action | Action | string | Inconnu |
pool | La piscine du rideau | int32 | 0:Piscine ordinaire 1:Sous - titres Pool 2:Piscine spéciale(Code/BASRideau d'obus) |
idStr | Rideau d'obusdmIDType de chaîne pour | string | Unique Disponible pour les paramètres de fonctionnement |
2.4 Analyse seg.so Format des données d'écran
Exemple de vidéo:https://www.bilibili.com/video/av98919207
Vous devez installer python De probuf Sac: pip install protobuf
Compiler proto Fichier de structure,
protoc --python_out=. dm.proto
Une fois l'exécution terminée dm_pb2.py,Introduire ceci dans le Code python Documentation,
dm_pj.py Les codes sont les suivants::
Attention!:
- Écran en temps réel Pas besoin. cookie,Demande directe pour obtenir seg.so
- Rideau d'histoire Besoin cookie Pour obtenir seg.so
# -*- coding: utf-8 -*-
# @Author :
# @Date :
# @File : dm_pj.py
# @description : XXX
import json
import requests
from dm_pb2 import DmSegMobileReply
from google.protobuf.json_format import MessageToJson, Parse
b_web_cookie = 'SESSDATA=fd25e2e6%2C1660373048%2C287c9%2A21;'
def get_date_list():
url = "https://api.bilibili.com/x/v2/dm/history/index?type=1&oid=168855206&month=2022-02"
headers = {
'cookie': b_web_cookie
}
response = requests.get(url, headers=headers)
print(json.dumps(response.json(), ensure_ascii=False, indent=4))
def dm_real_time():
url_real_time = 'https://api.bilibili.com/x/v2/dm/web/seg.so?type=1&oid=168855206&pid=98919207&segment_index=1'
resp = requests.get(url_real_time)
DM = DmSegMobileReply()
DM.ParseFromString(resp.content)
data_dict = json.loads(MessageToJson(DM))
# print(data_dict)
list(map(lambda x=None: print(x['content']), data_dict.get('elems', [])))
def dm_history():
url_history = 'https://api.bilibili.com/x/v2/dm/web/history/seg.so?type=1&oid=168855206&date=2022-02-23'
headers = {
'cookie': b_web_cookie
}
resp = requests.get(url_history, headers=headers)
DM = DmSegMobileReply()
DM.ParseFromString(resp.content)
data_dict = json.loads(MessageToJson(DM))
# print(data_dict)
list(map(lambda x=None: print(x['content']), data_dict.get('elems', [])))
if __name__ == '__main__':
# dm_real_time()
get_date_list()
# dm_history()
pass
Capture d'écran des résultats de l'exécution:
Comparaison des écrans:
边栏推荐
- Accounting regulations and professional ethics [1]
- nodejs爬虫
- Information security - Analysis of security orchestration automation and response (soar) technology
- 渗透测试 ( 8 ) --- Burp Suite Pro 官方文档
- Perinatal Software Industry Research Report - market status analysis and development prospect forecast
- Cost accounting [16]
- If you want to apply for a programmer, your resume should be written like this [essence summary]
- [exercise-7] crossover answers
- 初入Redis
- Research Report of exterior wall insulation system (ewis) industry - market status analysis and development prospect prediction
猜你喜欢
STM32如何使用STLINK下载程序:点亮LED跑马灯(库版本)
渗透测试 ( 1 ) --- 必备 工具、导航
洛谷P1102 A-B数对(二分,map,双指针)
信息安全-威胁检测引擎-常见规则引擎底座性能比较
渗透测试 ( 5 ) --- 扫描之王 nmap、渗透测试工具实战技巧合集
Penetration testing (5) -- a collection of practical skills of scanning King nmap and penetration testing tools
X-forwarded-for details, how to get the client IP
渗透测试 ( 3 ) --- Metasploit Framework ( MSF )
Essai de pénétration (1) - - outils nécessaires, navigation
信息安全-史诗级漏洞Log4j的漏洞机理和防范措施
随机推荐
【练习-10】 Unread Messages(未读消息)
动态规划前路径问题
【练习-6】(PTA)分而治之
Research Report of cylindrical grinder industry - market status analysis and development prospect forecast
1010 things that college students majoring in it must do before graduation
Cost accounting [14]
渗透测试 ( 3 ) --- Metasploit Framework ( MSF )
渗透测试 ( 1 ) --- 必备 工具、导航
Cost accounting [21]
JS调用摄像头
信息安全-安全编排自动化与响应 (SOAR) 技术解析
Opencv learning log 31 -- background difference
Penetration test (1) -- necessary tools, navigation
用C语言写网页游戏
Information security - threat detection - Flink broadcast stream broadcaststate dual stream merging application in filtering security logs
If you want to apply for a programmer, your resume should be written like this [essence summary]
China exterior wall cladding (EWC) market trend report, technical dynamic innovation and market forecast
0-1背包问题(一)
Record of brushing questions with force deduction -- complete knapsack problem (I)
最全编程语言在线 API 文档