Staff/Senior Staff Web3 Big Data Engineer

Posted 7/6/2026 · last confirmed live 8/26/2026

高级大数据开发工程师 / 大数据开发专家（Web3 + AI方向）职责描述 (Responsibilities) 负责公司大数据平台的架构设计、开发与优化，支撑链上数据、交易行为、用户画像等海量数据的采集、处理与分析设计并搭建链上数据（区块链交易、智能合约事件、钱包地址行为等）的实时/离线数据处理管道负责数据仓库/数据湖建设，制定数据分层规范，保障数据质量、一致性与时效性结合AI/大模型能力，构建智能化数据应用，如链上异常交易识别、智能风控模型、用户行为预测、自然语言驱动的数据查询（Text2SQL）等搭建面向AI应用的数据基础设施，如向量数据库、特征平台、Embedding数据管道，支撑RAG检索增强、Agent数据供给等场景与算法/AI团队协作，负责模型所需训练数据、特征工程的大规模数据处理与Pipeline建设与产品、风控、增长等团队协作，支持交易分析、反欺诈、用户增长、精细化运营等业务场景的数据需求优化大数据任务的性能与资源利用率，保障核心链路的稳定性与SLA 跟踪业界大数据、Web3数据基础设施及AI技术的前沿进展，推动技术选型与架构演进参与国际化团队协作，能够与海外同事/合作伙伴（交易所、公链项目方等）进行英文技术沟通与文档撰写任职要求 (Requirements) 大数据技术能力计算机、软件工程或相关专业本科及以上学历，7年以上大数据开发经验精通 Hadoop、Spark、Flink 等大数据生态组件，具备离线/实时数仓建设经验熟悉 Hive、Kafka、HBase、ClickHouse、Doris 等存储与计算引擎，有大规模集群调优经验熟练使用 Java/Scala/Python 进行大数据开发，具备良好的SQL调优能力了解数据治理、数据质量监控、元数据管理体系者优先 AI能力（必备/加分，可按需调整）了解大模型（LLM）基本原理与应用范式，具备Prompt工程、RAG（检索增强生成）相关实践经验有向量数据库（如 Milvus、Pinecone、Weaviate、pgvector）使用或Embedding数据处理经验熟悉AI Agent、MCP（Model Context Protocol）等新兴AI应用架构者优先具备将大数据平台与AI/ML模型训练、推理链路打通的经验，如特征平台、实时特征服务有使用大模型辅助数据研发（如自动化数据质量检测、智能ETL生成、Text2SQL）实践经验者优先具备基础的机器学习/深度学习知识，能与算法团队高效协作者优先 Web3行业知识熟悉区块链基本原理（账户模型/UTXO模型、共识机制、Gas机制等）具备主流公链（如 Ethereum、BSC、Solana、Bitcoin 等）链上数据结构的理解，如区块、交易、Event Log、Token转账（ERC20/ERC721）等有链上数据采集/解析经验者优先，如自建或对接过 The Graph、Dune、Etherscan API、节点RPC等数据源了解DeFi、NFT、跨链桥等业务形态及其数据特征者优先有交易所、钱包、DeFi协议或链上分析公司相关数据开发经验者优先语言与软技能英语读写流利，能独立阅读英文技术文档（如以太坊黄皮书、各类RFC/EIP提案、AI论文）、撰写英文技术方案与周报能够与海外团队、社区或合作方进行英文技术交流，具备良好的跨文化沟通能力逻辑清晰，具备较强的问题拆解与故障排查能力，对AI新技术有强烈的学习热情良好的团队协作精神，能够在快节奏、高不确定性的Web3行业环境中保持稳定输出加分项 (Nice to have) 有智能合约基础知识（Solidity），能读懂合约代码逻辑有开源大数据/区块链数据/AI基础设施项目贡献经验持有相关技术认证（AWS/GCP大数据或AI认证等）有搭建或使用AI Coding Agent（如Claude Code）提升数据研发效率的经验《候选人隐私声明》最近更新日期：2025年【9】月【1】日   1. 介绍本《全球候选人隐私声明》（简称“隐私声明”）旨在帮助您了解当您向我们提交职位申请时，我们在收集、处理、传输及使用个人数据方面的政策。本隐私声明不适用于非候选人或非申请人的用户、访客或访问网站的客户。此外，本隐私声明不适用于我们的现有或前员工或独立承包商，因为其受公司内部员工隐私政策的约束。   2. 一般信息 (a) 您的信息我们将收集并处理与您相关的特定个人数据，具体包括：个人资料数据：姓名、别名、个人联系方式（如地址、电话、电子邮件）、驾驶执照、移民身份；资质资料：简历、公司简介中的信息、社交媒体资料及活动、照片、求职信、工作经历、资质与技能、推荐人信息，以及必要时进行的背景调查（可能包含犯罪记录详情）；就业数据：职位名称、办公地点、公司电子邮箱地址、薪酬、福利、专业经验、教育背景（含专业认证与资质）、起止日期、绩效记录、培训记录、员工编号；紧急联系人数据（如适用）；与劳动或就业法律合规相关的信息；系统数据：我们通过与您沟通获取的音频、电子或类似信息（例如电话录音、电子邮件）；您自愿提供的其他数据，包括您在反馈或调查中选择表明身份时提交的数据。   (b) 渠道当您应聘职位时（包括面试环节，面试过程可能会被录音），我们会直接向您收集个人数据。此外，我们还可能通过各种其他渠道收集您的个人信息，并将其与您主动提供的数据进行整合。例如，我们可能从以下渠道获取您的个人数据：您用于向我们求职的招聘网站；教育机构；前雇主，当其向我们提供雇佣证明时；经您授权、允许我们联系的专业推荐人；法律允许范围内的第三方背景调查、信用调查或其他入职前筛查服务机构；您公开的社交媒体资料或其他公开来源；猎头公司或招聘机构；公司通信及 IT 系统/应用程序，这些系统会自动收集用户相关信息及其传输内容；公司其他员工；公众、法院、公共机构及其他公开渠道。 (c) 目的我们处理该等个人数据的目的如下：评估、建立并履行雇佣合同；保障我们场所、资产、系统及知识产权的安全，并执行公司政策；履行法律义务，遵守审计、记录保存及报告要求，满足税务要求，确保健康与安全；维护我们的正当商业利益及合法权益；开展审计、调查及合规工作。   (d) 汇总数据我们还会出于任何目的创建、处理和/或共享“汇总数据”，例如统计或人口统计数据。该汇总数据可能源自您的个人数据，但一旦形成汇总形式，即不再构成个人数据，因为无法通过该数据识别到您。但是，如果我们把汇总数据与您的个人数据相结合或关联，使其能够与您关联，则我们会将该等合并后的数据视为个人数据，并根据本隐私声明使用该等个人数据。   (e) 数据保留实际保留期限会因个人数据类型及每种数据类型的用途而异。我们会根据是否存在合法保留目的来保留您的个人数据，包括适用法律规定的保留目的。   (f) 数据传输我们在不同的司法管辖区处理并存储上述信息。个人数据可能会被传输至我们其他实体和第三方（包括服务提供商），其可能位于您所在司法管辖区以外。向中国大陆以外传输数据会在取得您明确同意后进行。   (g) 向第三方披露个人数据可能会与以下各方共享：我们的母公司、子公司及母公司控制下的其他关联方，用于运营共享的基础设施、系统和技术，或用于与本隐私声明一致的用途；政府机构、执法人员、法院或其他相关方，用于上述“目的”部分所述目的；为我们提供服务并代表我们处理个人数据的服务提供商。   (h) 信息安全我们已采取适当的安全措施（包括技术和组织措施），以防止个人数据被意外丢失、未经授权使用或访问、被篡改或泄露。   (i) 自动化处理我们使用自动化工具来协助我们处理和筛选求职申请。这些工具利用复杂的算法和机器学习技术，来支持以下操作：最低要求：我们会根据您提供给我们的信息，使用自动化的工具来确定您是否符合职位的最低要求。这些工具会分析您在我们的招聘网站上提交的表格中的选择，以判断您是否具备相应的经验。在某些情况下，这些自动化工具可能会在没有招聘团队成员进一步审查的情况下直接拒绝您的申请。利用人工智能对申请评分及匹配未来机会：在您同意的情况下，我们会使用基于机器学习（也称为人工智能或 AI）的工具，对您在申请及资格问题中的回答，以及简历中的专业信息进行处理。这些工具会：根据您提供的信息与基本职业技能及优先资格的匹配程度，自动为您评分。我们招聘人员会根据此筛选分数进一步评估候选人；将您对申请问题、资格问题中的回答，以及简历中的专业信息，与未来职位的基本资格和优先资格进行比对。当匹配成功时，我们的招聘人员可能会邀请您申请该职位。您在申请提示中选择“是”，即表示您同意我们按此方式使用您的数据；选择“否”则表示您不同意我们以此方式使用您的数据。即使您选择不参与此处理，您的申请仍将被正常评估；是否参与完全出于自愿。若您选择退出 AI 匹配，我们招聘人员将在不借助 AI 评分的前提下审核您的申请。请注意，即使您不同意将您的数据用于 AI 匹配，我们招聘人员仍可能根据其自己的审核与您联系并告知您未来的职位空缺，但届时不会通过 AI 推荐您的资料，前提是您同意就未来的机会与您联系。   (j) 您的权利如需索取我们持有的您的个人数据副本或行使下述任何权利，请联系我们的工作人员。 (i) 您可以要求访问我们持有的与您相关的个人数据，并核实我们是否在合法处理该数据。 (ii) 您可以要求更正我们持有的不完整或不准确的个人数据。 (iii) 如对于我们持有的您的个人数据已无继续处理的合理理由，您可以要求删除该等个人数据。 (iv) 在有限情形下，若您曾就特定目的同意我们收集、使用及传输个人数据，您有权随时撤回该同意。   (k) 对本隐私声明的更新我们可随时更新本隐私声明，并将变更内容发布在本页面。如对本隐私声明作出任何更新，我们将同步更新上述“隐私声明日期”。所有更新仅适用于隐私声明中所述生效日期之后所收集的信息。

This role is published by O Group on greenhouse. SwiftFit is not the employer and does not accept applications.