首页
注册
登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请
登录
• 外包信息请发到
/go/outsourcing
节点。
• 不要把相同的信息发到不同的节点
V2EX
›
酷工作
数据管道开发工程师(Golang/ Python ),上海虹口区, GenAI 公司(一年内四轮融资,市值一亿美金+)
fancyfrees
·
1 天前
· 159 次点击
- 端到端负责数据管道:采集/解析/清洗与匿名化/结构化建模/存储与查询/结果回传,保障稳定性与可扩展性。
- 使用 Golang/Python 交付高质量后端与 CLI ,关注性能、可靠性与可维护性。
- 基于 OpenTelemetry 建立日志/指标/追踪可观测性;使用 SigNoz 进行监控、排障与性能分析。
- 进行 MongoDB 的数据建模、索引与查询优化,持续提升读写与成本效率。
- 建立基础的回归与评估( evaluation )机制:数据集与口径、指标设计、离线/在线对比与追踪,输出改进建议。
- 用英文撰写技术文档与变更说明,参与英文代码评审与跨团队协作。
任职要求
- 本科及以上,3 年以上数据管道/Data Pipeline 实战经验,能独立承担端到端交付。
- 精通 Golang 或 Python 至少一门,并能熟练使用另一门进行生产级开发;具备良好工程实践(代码评审、测试、CI/CD )。
- 熟悉 OpenTelemetry 与 SigNoz 的集成与使用,能完成观测、告警与问题定位。
- 熟练掌握 MongoDB ( Schema 设计、索引与查询优化、容量规划)。
- 具备系统设计与性能优化能力,能在稳定性、成本与可维护性间平衡。
- 英文读写良好,适应全英文文档、评审与协作环境。
加分项
- 海量会话/日志/文本数据的近实时处理与查询优化经验。
- 评估与实验经验(指标口径治理、离线/在线回归、版本化与可追溯)。
- 熟悉常见消息/缓存(如常见 MQ/流式系统、Redis 等)、容器化与云上数据库/存储。
微信:fancyfrees
目前尚无回复
数据管道
Golang
Python
关于
·
帮助文档
·
自助推广系统
·
博客
·
API
·
FAQ
·
实用小工具
·
5181 人在线
最高记录 6679
·
Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 30ms ·
UTC 07:19
·
PVG 15:19
·
LAX 00:19
·
JFK 03:19
Developed with
CodeLauncher
♥ Do have faith in what you're doing.
❯