大数据开发工程师岗位职责(精选33篇)
1、根据业务需求进行数据模型的调研、设计、开发及验证工作,并持续进行模型的优化;
2、负责数据模型架构的构建,建立数据抽取、清洗、校验等数据加工流程规范及olap多维数据分析模型;
3、持续对系统的技术架构进行改进和优化,提升海量数据的查询性能和用户体验。
职责:
1、参与需求调研,负责开展专项业务分析,数据开发工作;
2、负责数据支撑工作,从事数据库开发,报表设计和实现;
3、负责相关数据库设计的编写等工作;
4、参与项目的实施,负责数据结果提交、测试反馈与优化;
5、运营及决策提供业务分析及数据支持;
6、参与建立采集、转换、整合数据,与展现开发报表分析的数据设计流程,并应用于实际操作中。
任职要求:
1、本科以上学历,计算机相关专业,掌握SQL语言,至少熟练使用过一种数据库;
2、熟悉ETL的概念和流程,至少熟练使用过一种ETL工具(odi,informatica,kettle等);
3、系统学习过数据库原理,对关系模型设计有一定认识更佳;
4、良好的逻辑思维能力,敏锐的数据洞察力,较强的总结归纳能力;
5、持有OCP认证、OCM、数据库工程师、SPSS、SAS、CDA任意一种证书者优先;
6、具备交通行业数据分析或经营分析相关大数据系统项目优先。
职责
1、负责公司自有项目的服务器后端程序的技术研发工作,包括技术架构设计、重构、优化,根据产品规划及技术规划制定应用架构方案;
2、负责公司项目核心功能、数据总线解决方案及第三方接口的开发,主导技术难题攻关,持续提升核心系统在高并发、海量请求数下的高处理性能,编写程序,单元测试,bug修复工作等;;
3、负责设计、编码和调试研发平台后端技术框架,优化及提高后端代码的性能,审核和评估相关方案与设计,以确保其符合架构规划,满足业务需求;
4、分析系统瓶颈,解决各种疑难杂症,对系统进行性能调优,指导程序员编写程序,落实技术规范,与产品经理、测试工程师、其他成员沟通合作,保证产品研发工作的质量和进度;
岗位要求
1、软件工程或计算机相关专业大专以上学历,3年以上商业项目的实际开发经验,有电商或短视频项目的实际开发经验;
2、精通ThinkPHP、Laravel、Yii等流行框架,熟练掌握LAMP,熟悉TP/SMARTY;
3、精通MySQL、NOSQL、MongoDB等数据库,能够编写和优化复杂的SQL程序;
4、擅长消息队列、任务调度、负载均衡、并发控制,极具面向对象思维,懂得低耦合高复用封装,拥有一丝不苟的代码编写规范习惯;
5、熟悉Unix/Linux操作系统,熟练掌握shell、Python、Perl其中一种脚本语言;
职责:
1、负责平台系统的开发工作;
2、参与系统设计以及核心代码的编写;
3、处理日常发现的问题,配合各部门需求完成系统流程优化工作;
4、 参与重大项目的技术方案设计及技术评审,把握复杂系统的设计,确保系统的架构质量;
5、 为团队引入创新的技术、创新的解决方案,用创新的思路解决问题。
任职要求:
1、大专及以上学历,计算机相关专业,具有5年以上Web/PHP开发经验;
2、熟练掌握 HTML/CSS 和 JavaScript 等 WEB 开发技术,熟练掌握 PHP语言,熟悉数据库Mysql,拥有优秀的数据库设计能力, 熟悉php安全开发规范;
3、有在线教育类项目开发经验优先,能处理高并发;
4、熟悉设计模式和算法,深入了解PHP的性能最优化和安全最大化;
5、为人诚实正直,工作主动,有强烈的责任感和事业心。
职责 :
1、参与需求评审,根据需求分析报告和需求规格说明书主导技术方案。
2.负责项目的开发与维护,能独立处理和解决所负责的任务;
3.制定软件开发阶段的工作计划,协调开发、测试的工作,做好日常代码审查工作,保证项目的进度和质量。
岗位要求:
1、本科以上学历,5年及以上java语言开发经验; 编程基础扎实,精通JSP、Servlet等开发技术。
2、熟悉前端框架:如Easyui、Bootstrap等。
3、熟悉主流数据库:Oracle、MySQL等的应用系统的数据库设计、开发经验,熟练掌握SQL。
4、熟悉J2EE体系架构,熟悉Spring、Hibernate、MyBatis等主流开发框架。
5、有主流应用服务器,如Tomcat、WebLogic至少一种的部署配置及性能调试经验,熟悉使用svn,git版本管理工具;。
6、了解webservice、socketMQ等接口框架。
7、熟悉Linux系统常用命令;
8、能承受压力,个性成熟稳重,具备良好的沟通协调能力,工作积极主动认真负责,富于团队精神,具有良好的自学能力和独立解决问题的能力。
职责:
1.负责 Linux 系统的日常运营,包括安装,维护和补丁/升级 Linux 操作系统和各种应用软件;
2.高级故障排除和复杂的问题解决;
3.基于 Linux 的监控系统 Zabbix 的日常操作以及新的功能二次开发和实施;
4.监控系统事件以确保健康,最大化系统可用性和服务质量;
5.构建相关脚本以自动和大规模地完成日常工作;
6.维护有关平台的配置,操作和故障排除过程的文档;按照指示参与标准,指南,做法和指标的定义。
岗位要求:
1、计算机专业,网络运维 3 年以上;
2、熟悉网络基础管理,熟悉网络设备,熟悉桌面运维,域控,权限管理;
3、熟悉 Zabbix 系统,Python,Oracle;
4、熟悉网络交换、路由基本原理,熟悉计算机网络管理基础技术;
5、熟悉机房管理要求,熟悉机房基础设施的基本管理和技术;
6、熟悉交换机路由器,能够独立上架、调试局域网;
7、熟悉服务器虚拟化流程与操作,可根据用户需求搭建虚拟化环境。
1、规划车联网安全架构,不断完善车联网产品的安全规范和要求,跟进、解决存在的安全隐患;
2、对上线前的软件或者车上产品进行安全方面验证及测试;
3、跟进最新漏洞的研究工作,理解漏洞的原理,编制漏洞研究报告和防范措施;
4、负责行业/国家车联网汽车网络安全部分的技术及标准规范的研究工作。
职责:
1、负责公司网站的持续系统开发、测试和发布,以及维护、网页内容的更新等工作;
2、参与技术支持 :电子商务系统后台设计与优化、其他管理系统和工具软件的开发与优化、用户数据分析和应用以及其他的一些平台系统管理;
3、负责网站的系统稳定运作,保持连续性运转以及为了达成该目的提出信息化建议和立项建议;
4、负责网站的部分搜索引擎优化工作;
5、负责网站的内容策划和管理工作,依据用户反馈对内容进行持续迭代优化;
6、负责网站的功能和结构进行迭代和优化工作,协同工程师和设计人员持续提升用户交互率;
7、监控和分析同行的发展状态,对比自身实际情况,提出优化方案并进行尝试;
8、负责系统文档的编制工作和系统相关的培训工作;
职位要求:
1、从事PHP编程工作1年以上;
2、熟练操作linux系统,搭建LAMP/LNMP环境,掌握基本的linux命令;
3、熟练使用PHP开发以及PHP框架;
4、熟练掌握mysql数据库,包括数据库设计、优化等;
5、掌握/javascript/html/css/json/ajax等技术;
6、根据产品需求、系统需求,能够独立设计、开发项目;
7、具有手机端、微信公众号开发经验优先;
8、具有区块链技术开发经验优先。
职责:
1.进行产品需求分析和系统架构设计,负责公司核心业务模块开发,能独立攻关系统难点问题。
2.编写系统架构文档、接口说明文档及主要业务流程图等开发文档。
3.进行团队技术管理,为每个版本制定准确的开发计划并分配给下属人员进行开发。
4.代码审计,指导初中级开发人员编码,协助参与代码设计、审核和检查。
5.参与系统稳定性、性能和扩展性调试。
任职要求:
1.计算机、电子、通信、信息处理、电子商务、办公自动化等相关专业大专以上学历,有5年以上相关软件开发经验;
2.精通web mvc框架、Java、JavaScript,熟悉JSP/Servlet、JavaScript、Ajax、Jquery等WEB技术,至少精通Struts、Spring、Hibernate、iBatis等主流的开源框架之一;
3.有分布式、高可用、高并发系统开发经验,熟悉Dubbo等分布式框架并有应用经验;
4.熟练使用Oracle、MySQL、SQL Server数据库之一,有数据库性能问题诊断及SQL语句调优经验;
5.熟悉Linux操作系统,熟悉Shell脚本,熟练使用SVN或Git版本管理工具;
6.熟练使用WebLogic、Tomcat、WebSphere等web应用服务器之一,熟悉nginx、Apache等的安装、配置;
7.参与过大型项目软件的开发,有团队精神和敬业精神,具备良好的自我学习能力和独立的解决问题能力,能够带领小团队在指定时间内完成高质量程序;
1.基于公司大数据产品进行数据开发,包括数据的采集,清洗,预处理,存储,建模,分析挖掘等
2.根据业务用户需要分析数据,提供数据支持
3.参与公司大数据产品的运维和监控,保障数据质量和服务稳定性
1、运用大数据分析工具和技术解决风险管理业务中遇到的实际问题与需求,如风险评估、成长评价等,包括对模型进行设计、开发、验证、测试、部署及监控、优化。。
2、基于海量用户数据和特征,进行数据质量检查、特征加工、数据清洗等,建立数据挖掘模型。
3、评估数据源的质量和价值,能结合业务需求和场景,从各种数据维度中挖掘数据价值,并设计不同的模型,应用于不同的业务场景中。
职责:
1.推动及开发高效的自动化运维、管理工具,提升运维工作效率
2.负责公司自动化运维平台的设计和开发,参与公司运维体系的建设
3.研究DevOps新技术和方向,持续提高运维效率和质量
任职要求:
1、3年以上互联网运维开发经验
2、熟悉python语言,熟悉Django/Flask等常用的web框架原理。
3、有自动化运维平台架构设计能力,能主导或独立完成自动化运维平台开发工作。如CMDB、运维工单系统、监控系统等相关的设计和开发工作
4、熟悉jekins、docker等持续集成、持续部署工具,熟悉gitlab
5、熟悉至少一种常用自动化工具(puppet、saltstack、ansible)
1、负责结构化数据和文本的数据处理、建模、分析等工作,如:数据清洗、中文分词、情感分析、文本分类等;
2、负责数据需求的收集、整理和分析,配合其他同事完成结构化数据和文本的需求分析;
3、负责分析结果的可视化展现;
4、负责核心算法的设计与优化。
任职要求:
1、全日制本科毕业;
2、计算机或数学或软件类或统计相关专业;
3、熟悉数据挖掘和文本挖掘的理论基础,掌握统计模型、机器学习相关原理;
4、熟悉r/python/java等编程语言,熟悉常用数据结构和算法,熟悉正则表达式的使用。
1、从事大数据分布式存储/应用服务的设计和开发,挑战大规模、高并发、易运维的分布式系统设计构建;
2、参与负责大数据运营/风控/分析等数据应用产品开发迭代,包括需求讨论需求/系统/算法的讨论、设计及实现;
3、定位和解决集群组件如spark、hive、hbase、kafka的性能和高可用问题,协助集群监控系统的开发。
职责:
1、 负责网络设备、安全设备、linux等系统日常运维工作;
2、 利用工具和代码减少重复性劳动,提高工作效率,增强团队运维能力;
3、 负责自动化运维项目开发维护工作;
4、 能够了解客户业务需求,提供解决方案及技术建议方案;
5、 保证项目的顺利交付
岗位要求:
1. 熟练掌握linux操作系统原理和命令
2. 熟悉主流的安全设备、网络设备,如防火墙、IPS、交换机等;
3. 熟悉自动化运维开发,精通python、shell语言,有python项目开发经验(具有单个脚本千行以上开发经历优先);
4. 熟悉至少一种开源监控系统 ( Zabbix / ELK),开源配置管理工具,( Saltstack / Puppet / Ansible )。
5. 具有较强的分析问题解决问题能力,抗压能力,总结、归纳和创新能力;
6. 富有团队协作精神,具备良好的沟通能力;
7、具有良好的英语阅读能力,能够独立翻译相关的英文文档。
8、计算机应用相关专业大学本科以上学历,英语四级以上。
1.参与产品和项目研发工作,基于spark完成产品大数据架构和功能开发;
2.搭建和调优大数据基础平台,包括hadoop/hbase/hive/sqoop/kafka/flume/spark/storm等大数据组件的环境搭建;
3.维护线上系统的稳定性、可靠性,通过分析现象快速定位问题,进而提出优化方案,改进要求;
职责描述:
1、负责车联网网关、系统通信的开发,并撰写相关文档。
2、负责沟通了解需求,并根据需求进行相关模块设计。
3、配合其他职能部门接口开发和问题定位。
任职要求:
1、计算机或相关专业本科以上学历;
2、三年以上C++连续开发经验,至少两年Linux平台开发经验;
3、熟练掌握OOP的'思想;
4、熟悉TCP/IP协议及相关协议、具有高性能服务器开发经验;
5、熟悉多进程/线程的开发方式;
6、熟悉常用的MySqI、 Oracle数据库;
7、精通Linux操作系统;
8、具有良好的沟通协作能力,做事认真,吃苦耐劳;
9、有汽车行业系统开发经验者优先。
1. 基于mtk,高通芯片平台的移动设备的软件解决方案,主要是嵌入式上层Android系统/App开发。
2. 负责开发Android Framework/App,优化Android系统、内存泄露。
3, 负责开发Android hal 层,定位解决一些深度bug。
4. 客户支持:对客户基于上述解决方案开发的产品提供技术指导和支持。
职责
1负责研发公司应用软件、基础平台组件的模块设计、开发、单元测试和交付
2编写技术文档,为使用平台组件的应用开发团队提供技术支援
3关注新技术,对新技术进行调研和引入
应聘要求:
1. 本科或以上学历, 计算机或相关专业背景。5年以上Java开发经验
2. 有较强的Java语言功底,熟悉I/O、多线程、集合等基础知识,熟悉分布式、缓存、微服务、消息等机制
3. 熟悉J2EE架构和相关的Java开发技术,熟悉Maven的使用,精通Spring / Spring Boot、Spring MVC、Spring Data JPA、 RESTFul定义与开发等,能快速适应现有UI框架
4. 熟悉MySQL数据库,熟悉关系数据库逻辑和物理建模,熟练使用SQL语言,熟悉Linux环境及常用命令
5. 热爱技术,喜欢钻研,能对已有框架进行扩展的能力
6. 能够独立担当功能模块的设计开发,具备较强的问题排查及分析能力,快速定位并解决,具有良好的开发文档编写能力
(1)根据业务进行数据需求的调研、设计、开发及验证工作,并持续进行数据业务的'优化;
(2)负责大数据整体设计和开发工作,包括数据接入、清洗、计算、校验等数据加工流程,并沉淀文档;
(3)持续对系统的技术架构进行改进和优化,提升海量数据的查询性能和用户体验。
(4)此岗位需驻场开发半年左右(地点:新疆)
职责:
后端应用程序及数据接口的设计和开发;
后端应用程序及数据接口的优化及维护;
后端数据库的管理;
负责网站后端程序开发、数据库结构设计和搭建
岗位要求
精通后端开发(包含API开发)及PHP编程语言;
精通关系型数据库及其相关开发,如MSSQL、Oracle、MySQL、PostgreSQL中的一种(以MySQL经验为优先);
熟练掌握各类主流技术开发框架(如ThinkPHP、YII等), 熟悉MVC、RESTful、SOA等架构模式;
精通ThinkPHP 5.0/5.1;
熟悉前后端分离开发模式和流程;
有NoSQL数据库(如MongoDB、MemCache、Redis等)使用经验者优先;
酷爱编程(愿意学习多种编程语言),有志于在后端开发上闯出一番天地;
有强烈的上进心和求知欲,善于学习新事物
岗位描述:
1、进行业务系统数据库的规划、设计、实施,设计并优化数据库物理建设方案;
2、对数据库进行管理,负责数据库应用系统的运营及监控;
3、业务系统数据库的定期维护和异常处理;
4、对数据库性能分析与调优,排错,保证数据安全;
5、对数据库进行定期备份、和按需恢复;
6、配合其他部门进行的数据处理、查询,统计和分析工作。
任职资格:
1、计算机相关专业,本科以上学历;
2、两年以上相关工作经验;
3、精通关系数据库原理,熟悉数据库系统的规划、安装、配置、性能调试;
4、精通sql脚本的编写,有丰富的数据库管理、运维调优经验;
5、熟练使用数据库管理、分析、设计工具;
6、快速处理系统突发事件的能力,较强的学习和创新能力;
7、良好的沟通能力、团队合作精神。
职责:
1.针对项目需求,进行基于JAVA的web后台开发;
2.按照项目计划,与项目组其他成员协同工作,在保证质量的前提下,按时完成开发任务;
3.对接短信通道,维护优化短信平台;
4.积极、认真地根据测试人员提出的问题对程序进行修改,确保产品的高品质。
任职资格:
1.2年以上Java开发实际工作经验;
2.熟练使用Java语言,熟悉JavaEE体系架构,具有B/S应用开发经验;
3.熟悉应用开发框架SSH及其他主流JavaEE开发技术;熟悉jQuery等框架;
4:熟练掌握sqlserver数据库技术,熟练掌握sql语句 ;
5.对用户体验、交互操作流程及用户需求有深入理解;
6.具有规范的编程习惯与文档编写能力,积极配合公司各项规范化建设工作;
7.有短信平台开发维护经验优先。
1.参与大数据精准学平台设计与研发,在大数据采集、存储、分析及应用领域都会有所涉及。
2.参与需求分析、系统架构设计、并完成需求设计相应文档的编写。
3.参与核心代码实现、系统性能优化。
4.保质保量地完成项目组分配的开发任务。
5.协助项目经理进行技术支持工作,共同解决产品研发过程遇到的技术难题。
职责:
1、 参与核心业务模块设计及数据库设计等。
2、负责子业务模块的分析设计、Review代码等。
3、主导攻克技术难关致力于系统性能优化安全加固保证系统的安全、稳定、快速运行。
4、参与后端项目开发,协助项目经理进行项目管理。
5、解决开发过程和线上的各种技术问题。
任职要求:
1、 本科及以上学历,计算机、软件开发或软件工程等相关专业。
2、 熟悉Mysql等主流数据库。
3、三年及以上使用JAVA开发的经验,熟悉dubbo、spring、mq等微服务框架的应用及其原理。
4、深入理解常用的缓存中间件如redis。
5、良好的理解和表达能力,善于沟通,很好的团队合作意识。
6、有供应链软件开发经验优先。
1.负责公司相关产品的详细设计、开发工作,包括参与需求分析、数据库结构设计、核心代码开发;
2. 维护和完善软件产品和系统,快速定位并修复相关缺陷,及时解决出现的问题;
3. 持续优化用户体验和产品性能;
4. 解决关键或者高难度的技术问题。
1、负责游戏接入平台以及数据统计后台前后端相关功能开发;
2、分析运营需求讨论设计方案并最终落实技术方案。
3、参与平台设计和性能调优与维护。
4、负责产品平台核心业务的开发,包括后台系统、游戏对接、充值系统、SDK渠道整合、广告平台等;
职责:
1、负责系统架构方案设计,参与产品开发需求讨论;
2、负责APP的开发、定制、调试、持续优化服务,跟踪前沿技术,评估并引入适用的新技术。
3、配合团队共同工作,完成上级领导交办的工作;
任职要求:
1、计算机相关专业,本科及以上学历;有三年以上PHP开发工作经验;
2、精通PHP+MYSQL编程,良好的PHP面向对象设计方法和编程思想,具有良好的编码习惯,代码结构清晰,逻辑性强;
3、熟悉可自适应HTML5实现方式(CSS3,LESS,HTML5),熟练掌握SQL语句,精通Mysql数据库开发技术,具备数据库分析和设计的能力,能够有效参与数据库的开发与管理.;
4、具备一定的系统分析与设计能力,具备良好而规范的设计和技术文档编写能力,具有良好的编程习惯;
5、对产品有较强的敏感度,具有良好的学习能力、沟通能力和团队合作精神;
1、参与公司项目后台功能开发,按时保质保量完成项目经理分配的工作任务;
2、通过对业务的理解,对现有产品和系统进行开发和优化;
3、与产品经理、测试工程师、其他团队沟通合作,确保产品研发工作的质量和进度;
4、技术预研和技术难点攻关,保障系统可用性、稳定性、和可扩展性。
职责:
1. 根据开发规范与流程完成系统设计、编码、测试以及相关文档的编写;
2. 前端应用代码编码工作;
3. 负责线上问题跟踪及解决;
4. 对单元测试要了解,会使用JUnit编写单元测试代码;
任职要求:
1. 本科及以上学历,计算机相关专业,
2. 至少需要3年以上Web开发经验
3. 能独立完成网页前端开发,兼容市面主流浏览器,对网站设计有较深入的了解;
4. 熟练使用掌握HTML(5)、CSS(3)、能够写原生JavaScript,理解OOP,至少熟练掌握一种前端类库,如jQuery等;
5.熟练使用各种前端调试工具,掌握面向对象编程思想;
6.深刻理解W3C标准,对表现与数据分离、Web语义化、提升用户体验有独特的见解;
7. 使用过MV*(如AngularJS、ReactJS、Vue等)类前端框架中的一种;
8.熟练使用Git进行项目代码管理以及版本控制;
9.熟悉Web前端性能优化者优先;
10.熟悉java服务器端语言优先;
职责:
1、负责数据中心和大数据处理平台的搭建
2、在线和离线海量数据分析平台的开发;
3、研究大数据前沿技术,提升系统的运维效率;
4、参与大数据的采集、存储、处理,分析等开发
5、参与数据挖掘算法的设计、对海量数据进行挖掘分析和发掘数据价值及算法学习及实现
【任职要求】:
1、计算机或相关专业本科学历及以上,2年工作经验以上
2、熟悉Java/Scala等至少一门语言,能对分布式常用技术进行合理应用,解决实际架构问题
3、熟练使用hadoop,hive,HBase,YARN,kafka,spark,Storm,Flume等大数据开发组件
4、熟悉整个大数据的完整处理流程,包括数据的采集、清洗、存储、分析和可视化及报表开发;
5、熟悉分布式系统概念、架构,有大规模分布式系统设计、实现、部署等经验;
6. 具有优秀的学习能力、独立分析和解决问题能力,良好的团队合作精神。
7. 有BI开发经验的优化考虑。
职责:
1、负责将设计图转化成页面,并使用HTML,CSS和Javascript 实现交互效果;
2、负责主流浏览器兼容性调整;
3、负责大型Web网站布局,可适配移动端;
4、与UI设计师协作,优化用户交互体验;
5、重新开发公司官网、手机网站等,
岗位要求
1、计算机等相关相近专业大专以上学历,1年以上Web前端开发经验;
2、精通HTML5,CSS3,JavaScript, 精通DIV+CSS网页布局,熟悉W3C网页标准,有开发前端框架经验;
3、熟悉常见JS开发框架源码实现,(如:prototype、jQuery、Mootools),至少熟练其中一种;
4、对常见的浏览器兼容问题有清晰的理解,并有可靠的解决方案;如IE6/7/8/9、Firefox、Safari、Chrome;做到代码效率最高,用户体验好,代码下载量最小;
5、熟悉MVC框架如Backbone、AngularJS、VueJS等;
6、对互联网新产品新技术有着良好的敏感度,对交互体验有较为深入的了解,有分享和总结的习惯;
7、较强的团队协作能力与沟通能力,并与设计人员,程序开发人员进行较好的配合;
8、熟悉前端性能优化,对SEO等有良好的体验;
9、富有创新精神,思路清晰,注重细节,工作努力负责,勇于接受挑战。
职责:
1、负责公司产品的开发工作;
2、负责系统相关业务模块的设计与开发;
3、负责相关开发文档的整理与编写;
4、与前端配合开发公司APP以及其他项目;
任职资格:
1、大专及以上学历,两年以上 PHP工作经验,自学能力强;
2、至少熟悉一种数据库开发MySQL/SQL/ORCAL。 对数据库性能有开发、配置、维护、性能优化经验;
3、有打包封装APP开发经验(必须);
4、熟悉主流PHP开发框架,熟悉Laravel 优先。;
5、良好的沟通,理解和逻辑能力;
6、具有Web前端开发经验优先;