大数据开发（离线存储方向）

针对数据仓库、搜索、推荐、机器学习等场景，优化EB级大数据存储系统的性能和成本，提供跨地域可横向扩展的能力，构建元数据系统，提供业务自动化迁移能力。 1. 优化大数据存储系统(HDFS)的效能，使用多层次存储、EC编码等手段降低运营成本，利用操作系统层缓存、内存、NVME等设备优化存储系统的读写性能，提高上层应用的效率； 2. 开发大数据存储系统(HDFS)的跨地域方案，利用有限的带宽和资源实现对用户透明、一致性的使用体验，保障存储系统多地域的可横向扩展性； 3. 开发描述大数据存储的元数据系统，建立全局统一的目录树结构，简化上层应用与底层存储的交互，实现可横向扩展的元数据系统，并提供业务透明的自动化迁移能力，降低运维成本 【任职要求】 1. 扎实的计算机理论和编程基础，熟悉常见的分布式理论和系统，熟悉JVM和Linux 2. 对Hadoop生态组件熟悉，在大数据计算和存储相关领域有相关…… 完整岗位描述与官方投递入口,请登录后在岗位详情页查看。

本站当前在招 3059 个上海技术研发岗位，其中 104 个公开标注了薪资。按这些标注统计：月薪（税前）主流区间 12K ~ 22K（25~75 分位），中位约 20K，最低 4K、最高 100K。