数据工程师 (Twitter/社交媒体数据方向)

薪资: Open
工作地点: 杭州/全职/线下

岗位职责：

1. 数据采集： 负责搭建和维护 Twitter (X) 等社交媒体平台的实时数据采集管道，对接 Twitter API v2 及 Firehose 数据源。
2. 数据清洗： 设计算法清洗非结构化数据，有效过滤垃圾信息（Spam/Bot），提取高价值的市场舆情数据。
3. NLP 预处理： 对文本数据进行结构化处理，包括实体识别（识别资产标签）、情感分析等，为 AI 模型提供高质量的训练/推理语料。
4. 知识图谱： 构建基于金融市场的 KOL 影响力网络与知识图谱，辅助策略分析。

任职要求：

1. API 经验： 精通 Twitter API 规则与限制，具备丰富的数据爬取与反爬对抗经验，能够解决大规模数据采集中的稳定性问题。
2. 数据处理： 熟练掌握 ETL 流程，熟悉 SQL/NoSQL 数据库，掌握 Python (Pandas/NumPy) 或大数据处理框架（Spark/Flink）。
3. NLP 基础： 了解自然语言处理（NLP）基本原理，有情感分析、文本分类相关项目经验者优先。
4. 行业认知： 对数字金融市场有一定了解，熟悉行业术语与主要社交媒体生态者优先。

投递方式：
请将简历发送至：job@openbuild.xyz