8-12K

大数据项目实施工程师

注：某大型集团公司项目部直招（非外包）；要求能接受出差（江浙沪一个月内的短差为主，全国范围为辅）；工作内容以大数据项目实施为主，大数据开发为辅；有医院和银行项目经验者优先考虑。
一、岗位职责：
1、数据交换系统部署与配置
（1）负责数据交换平台的安装、部署和配置工作，确保系统能够稳定运行在不同的环境中，包括但不限于服务器、云平台等。
（2）根据项目需求，对数据交换系统的各项参数进行优化调整，以满足高性能、高可靠性的数据交换要求。
2、数据交换流程设计与实施
（1）依据业务需求，规划和设计数据交换流程，包括数据抽取、转换、清洗、加密、传输等环节，确保数据在交换过程中的完整性、一致性和安全性。
（2）制定数据交换的调度策略和监控机制，实现数据交换任务的自动化执行和实时监控，及时处理数据交换过程中的异常情况，保障数据交换的时效性和稳定性。
3、数据质量保障与优化
（1）建立数据质量评估体系，对交换的数据进行质量检测和校验，通过数据清洗、转换等手段提升数据质量，确保数据的准确性和可用性。
（2）针对数据交换过程中的性能瓶颈和问题，进行性能优化和技术改进，提高数据交换的效率和吞吐量，降低数据传输延迟。
4、项目文档撰写与维护
（1）编写详细的项目文档，包括数据交换系统的部署文档、接口文档、数据交换流程文档、操作手册等，为项目的运维和后续扩展提供有力支持。
（2）对项目文档进行及时更新和维护，确保文档与实际系统的一致性和有效性，便于项目团队成员之间的沟通和协作。
二、任职要求：
1、教育背景：本科及以上学历，计算机科学与技术、软件工程、信息与通信工程等相关专业。
2、专业技能：
（1）了解或掌握至少一种编程语言，如 Java、Python 等，具备良好的面向对象编程能力和代码规范意识。
（2）熟悉数据交换相关技术和工具，如 ETL 工具（Informatica、Kettle 等）、消息队列（RabbitMQ、Kafka 等）、数据传输协议（FTP、SFTP、HTTP 等），有实际的数据交换项目经验。
（3）精通数据库操作，熟练掌握SQL语言，能够对常见的数据库系统（如MySQL、Oracle、SQLServer等）、大数据平台（mrs、tdh、cdh）进行数据查询、插入、更新、删除等操作，并具备一定的数据库性能优化能力。
三、项目经验要求：
1、具有2年以上数据交换项目实施经验，参与过银行或大型企业级数据交换平台的建设和维护，熟悉数据交换在不同业务场景下的应用和需求。
2、有成功的数据交换项目案例，能够独立承担数据交换系统的部署、接口开发、流程设计等工作，具备解决复杂数据交换问题的能力。
3、问题解决能力
（1）具备较强的问题分析和解决能力，能够快速定位和解决数据交换过程中出现的技术难题和数据质量问题，善于总结经验教训，提出有效的改进措施。
（2）具备良好的抗压能力和应变能力，能够在项目紧急情况下迅速响应，保障数据交换系统的正常运行。
4、沟通协作能力
（1）具备良好的沟通能力和团队协作精神，能够与项目团队成员、客户及其他相关方进行有效的沟通和协作，理解业务需求，推动项目顺利实施。
（2）具有较强的文档编写能力，能够清晰、准确地撰写项目文档和技术文档，向不同层次的人员进行技术讲解和培训。
5、能适应出差。