Staff/Senior Staff Web3 Big Data Engineer
About this role
高级大数据开发工程师 / 大数据开发专家(Web3 + AI方向)
职责描述 (Responsibilities)
- 负责公司大数据平台的架构设计、开发与优化,支撑链上数据、交易行为、用户画像等海量数据的采集、处理与分析
- 设计并搭建链上数据(区块链交易、智能合约事件、钱包地址行为等)的实时/离线数据处理管道
- 负责数据仓库/数据湖建设,制定数据分层规范,保障数据质量、一致性与时效性
- 结合AI/大模型能力,构建智能化数据应用,如链上异常交易识别、智能风控模型、用户行为预测、自然语言驱动的数据查询(Text2SQL)等
- 搭建面向AI应用的数据基础设施,如向量数据库、特征平台、Embedding数据管道,支撑RAG检索增强、Agent数据供给等场景
- 与算法/AI团队协作,负责模型所需训练数据、特征工程的大规模数据处理与Pipeline建设
- 与产品、风控、增长等团队协作,支持交易分析、反欺诈、用户增长、精细化运营等业务场景的数据需求
- 优化大数据任务的性能与资源利用率,保障核心链路的稳定性与SLA
- 跟踪业界大数据、Web3数据基础设施及AI技术的前沿进展,推动技术选型与架构演进
- 参与国际化团队协作,能够与海外同事/合作伙伴(交易所、公链项目方等)进行英文技术沟通与文档撰写
任职要求 (Requirements)
大数据技术能力
- 计算机、软件工程或相关专业本科及以上学历,7年以上大数据开发经验
- 精通 Hadoop、Spark、Flink 等大数据生态组件,具备离线/实时数仓建设经验
- 熟悉 Hive、Kafka、HBase、ClickHouse、Doris 等存储与计算引擎,有大规模集群调优经验
- 熟练使用 Java/Scala/Python 进行大数据开发,具备良好的SQL调优能力
- 了解数据治理、数据质量监控、元数据管理体系者优先
AI能力(必备/加分,可按需调整)
- 了解大模型(LLM)基本原理与应用范式,具备Prompt工程、RAG(检索增强生成)相关实践经验
- 有向量数据库(如 Milvus、Pinecone、Weaviate、pgvector)使用或Embedding数据处理经验
- 熟悉AI Agent、MCP(Model Context Protocol)等新兴AI应用架构者优先
- 具备将大数据平台与AI/ML模型训练、推理链路打通的经验,如特征平台、实时特征服务
- 有使用大模型辅助数据研发(如自动化数据质量检测、智能ETL生成、Text2SQL)实践经验者优先
- 具备基础的机器学习/深度学习知识,能与算法团队高效协作者优先
Web3行业知识
- 熟悉区块链基本原理(账户模型/UTXO模型、共识机制、Gas机制等)
- 具备主流公链(如 Ethereum、BSC、Solana、Bitcoin 等)链上数据结构的理解,如区块、交易、Event Log、Token转账(ERC20/ERC721)等
- 有链上数据采集/解析经验者优先,如自建或对接过 The Graph、Dune、Etherscan API、节点RPC等数据源
- 了解DeFi、NFT、跨链桥等业务形态及其数据特征者优先
- 有交易所、钱包、DeFi协议或链上分析公司相关数据开发经验者优先
语言与软技能
- 英语读写流利,能独立阅读英文技术文档(如以太坊黄皮书、各类RFC/EIP提案、AI论文)、撰写英文技术方案与周报
- 能够与海外团队、社区或合作方进行英文技术交流,具备良好的跨文化沟通能力
- 逻辑清晰,具备较强的问题拆解与故障排查能力,对AI新技术有强烈的学习热情
- 良好的团队协作精神,能够在快节奏、高不确定性的Web3行业环境中保持稳定输出
加分项 (Nice to have)
- 有智能合约基础知识(Solidity),能读懂合约代码逻辑
- 有开源大数据/区块链数据/AI基础设施项目贡献经验
- 持有相关技术认证(AWS/GCP大数据或AI认证等)
- 有搭建或使用AI Coding Agent(如Claude Code)提升数据研发效率的经验
最近更新日期:2025年【9】月【1】日
-
个人资料数据:姓名、别名、个人联系方式(如地址、电话、电子邮件)、驾驶执照、移民身份;
-
资质资料:简历、公司简介中的信息、社交媒体资料及活动、照片、求职信、工作经历、资质与技能、推荐人信息,以及必要时进行的背景调查(可能包含犯罪记录详情);
-
就业数据:职位名称、办公地点、公司电子邮箱地址、薪酬、福利、专业经验、教育背景(含专业认证与资质)、起止日期、绩效记录、培训记录、员工编号;
-
紧急联系人数据(如适用);
-
与劳动或就业法律合规相关的信息;
-
系统数据:我们通过与您沟通获取的音频、电子或类似信息(例如电话录音、电子邮件);
-
您自愿提供的其他数据,包括您在反馈或调查中选择表明身份时提交的数据。
-
您用于向我们求职的招聘网站;
-
教育机构;
-
前雇主,当其向我们提供雇佣证明时;
-
经您授权、允许我们联系的专业推荐人;
-
法律允许范围内的第三方背景调查、信用调查或其他入职前筛查服务机构;
-
您公开的社交媒体资料或其他公开来源;
-
猎头公司或招聘机构;
-
公司通信及 IT 系统/应用程序,这些系统会自动收集用户相关信息及其传输内容;
-
公司其他员工;
-
公众、法院、公共机构及其他公开渠道。
-
评估、建立并履行雇佣合同;
-
保障我们场所、资产、系统及知识产权的安全,并执行公司政策;
-
履行法律义务,遵守审计、记录保存及报告要求,满足税务要求,确保健康与安全;
-
维护我们的正当商业利益及合法权益;
-
开展审计、调查及合规工作。
-
我们的母公司、子公司及母公司控制下的其他关联方,用于运营共享的基础设施、系统和技术,或用于与本隐私声明一致的用途;
-
政府机构、执法人员、法院或其他相关方,用于上述“目的”部分所述目的;
-
为我们提供服务并代表我们处理个人数据的服务提供商。
-
最低要求:我们会根据您提供给我们的信息,使用自动化的工具来确定您是否符合职位的最低要求。这些工具会分析您在我们的招聘网站上提交的表格中的选择,以判断您是否具备相应的经验。在某些情况下,这些自动化工具可能会在没有招聘团队成员进一步审查的情况下直接拒绝您的申请。
-
利用人工智能对申请评分及匹配未来机会:在您同意的情况下,我们会使用基于机器学习(也称为人工智能或 AI)的工具,对您在申请及资格问题中的回答,以及简历中的专业信息进行处理。这些工具会:
-
根据您提供的信息与基本职业技能及优先资格的匹配程度,自动为您评分。我们招聘人员会根据此筛选分数进一步评估候选人;
-
将您对申请问题、资格问题中的回答,以及简历中的专业信息,与未来职位的基本资格和优先资格进行比对。当匹配成功时,我们的招聘人员可能会邀请您申请该职位。
-
-
您在申请提示中选择“是”,即表示您同意我们按此方式使用您的数据;选择“否”则表示您不同意我们以此方式使用您的数据。即使您选择不参与此处理,您的申请仍将被正常评估;是否参与完全出于自愿。若您选择退出 AI 匹配,我们招聘人员将在不借助 AI 评分的前提下审核您的申请。请注意,即使您不同意将您的数据用于 AI 匹配,我们招聘人员仍可能根据其自己的审核与您联系并告知您未来的职位空缺,但届时不会通过 AI 推荐您的资料,前提是您同意就未来的机会与您联系。
Company at a glance
Recreating ourselves to become O Group until Fall 2025
- Reshaping Global Society ○ Engineering a New World
ON THE INTERSECTION OF WISDOM – INTELLIGENCE – PROGRESS
Global Hub where the line of progress is pushed and trajectories are formed to reshape the future. We create symbiosis of global services to expand the boundaries of what is possible.
- Global Investing
Private Equity + Venture Capital
Project Financing
Stealth Mode Financing (private)
Global Business Development
Project Development + Management
Multi–Sectoral Project Development
Stealth Mode Business/Project Development
Public–Private Relationships
Strategic Partnerships / Relationships
Alliances / Foundations
Global Organizations ❍ Sovereign Funds ❍ Pension Funds ❍ Think Tanks ❍ Family Offices ❍ Focus Groups ❍ NGOs ❍ Research Organizations + Laboratories ❍ Science Centers
"In the era of change we don't provide services – we unite those who make a difference to pave the way for change to happen" – O Group
- 17 Initiatives under O Group umbrella
40+ Industries and Sub-Sectors
53 Countries with the Project and Partnerships presence
150+ Projects in Progress
250+ Projects under Review
5000+ Companies and Organizations in Cooperation
"No one can whistle a symphony. It takes a whole orchestra to play it." – "It is the movements that creates a form.”
We Collaborate to Evolve the Future
Tired of cold applications?
Sign up with Clera and we'll reach out the moment a role actually fits you — no more spraying applications into the void.
Know someone who'd be great for this?