大数据开发工程师岗位职责(通用32篇)
大数据开发工程师岗位职责 篇1
1、规划车联网安全架构,不断完善车联网产品的安全规范和要求,跟进、解决存在的安全隐患;
2、对上线前的软件或者车上产品进行安全方面验证及测试;
3、跟进最新漏洞的研究工作,理解漏洞的原理,编制漏洞研究报告和防范措施;
4、负责行业/国家车联网汽车网络安全部分的技术及标准规范的研究工作。
大数据开发工程师岗位职责 篇2
1、运用大数据分析工具和技术解决风险管理业务中遇到的实际问题与需求,如风险评估、成长评价等,包括对模型进行设计、开发、验证、测试、部署及监控、优化。。
2、基于海量用户数据和特征,进行数据质量检查、特征加工、数据清洗等,建立数据挖掘模型。
3、评估数据源的质量和价值,能结合业务需求和场景,从各种数据维度中挖掘数据价值,并设计不同的模型,应用于不同的业务场景中。
大数据开发工程师岗位职责 篇3
1.基于公司大数据产品进行数据开发,包括数据的采集,清洗,预处理,存储,建模,分析挖掘等
2.根据业务用户需要分析数据,提供数据支持
3.参与公司大数据产品的运维和监控,保障数据质量和服务稳定性
大数据开发工程师岗位职责 篇4
1、负责结构化数据和文本的数据处理、建模、分析等工作,如:数据清洗、中文分词、情感分析、文本分类等;
2、负责数据需求的收集、整理和分析,配合其他同事完成结构化数据和文本的需求分析;
3、负责分析结果的可视化展现;
4、负责核心算法的设计与优化。
任职要求:
1、全日制本科毕业;
2、计算机或数学或软件类或统计相关专业;
3、熟悉数据挖掘和文本挖掘的理论基础,掌握统计模型、机器学习相关原理;
4、熟悉r/python/java等编程语言,熟悉常用数据结构和算法,熟悉正则表达式的使用。
大数据开发工程师岗位职责 篇5
1、从事大数据分布式存储/应用服务的设计和开发,挑战大规模、高并发、易运维的分布式系统设计构建;
2、参与负责大数据运营/风控/分析等数据应用产品开发迭代,包括需求讨论需求/系统/算法的讨论、设计及实现;
3、定位和解决集群组件如spark、hive、hbase、kafka的性能和高可用问题,协助集群监控系统的开发。
大数据开发工程师岗位职责 篇6
(1)根据业务进行数据需求的调研、设计、开发及验证工作,并持续进行数据业务的’优化;
(2)负责大数据整体设计和开发工作,包括数据接入、清洗、计算、校验等数据加工流程,并沉淀文档;
(3)持续对系统的技术架构进行改进和优化,提升海量数据的查询性能和用户体验。
(4)此岗位需驻场开发半年左右(地点:新疆)
大数据开发工程师岗位职责 篇7
1.参与产品和项目研发工作,基于spark完成产品大数据架构和功能开发;
2.搭建和调优大数据基础平台,包括hadoop/hbase/hive/sqoop/kafka/flume/spark/storm等大数据组件的环境搭建;
3.维护线上系统的稳定性、可靠性,通过分析现象快速定位问题,进而提出优化方案,改进要求;
大数据开发工程师岗位职责 篇8
1、根据业务需求进行数据模型的调研、设计、开发及验证工作,并持续进行模型的优化;
2、负责数据模型架构的构建,建立数据抽取、清洗、校验等数据加工流程规范及olap多维数据分析模型;
3、持续对系统的技术架构进行改进和优化,提升海量数据的查询性能和用户体验。
大数据开发工程师岗位职责 篇9
1.参与大数据精准学平台设计与研发,在大数据采集、存储、分析及应用领域都会有所涉及。
2.参与需求分析、系统架构设计、并完成需求设计相应文档的编写。
3.参与核心代码实现、系统性能优化。
4.保质保量地完成项目组分配的开发任务。
5.协助项目经理进行技术支持工作,共同解决产品研发过程遇到的技术难题。
大数据开发工程师岗位职责 篇10
1、完成相关模块的设计与分析、代码编写、调试与测试,并能够编写各种支持性文档;
2、参与系统联调、测试;
3、参与系统架构分析;
4、参与软件系统日后维护工作,并编写相关维护文档;
大数据开发工程师岗位职责 篇11
职责:
1、负责JAVA项目模块的程序设计、编码;
2、负责JAVA应用系统项目开发,撰写所属模块开发文档;
3、编制高质量代码并进行代码测试,保证交付质量;
4、完成团队其他工作任务。
工作要求:
1、大专以上学历,计算机相关专业;
2、2年以上软件开发经验,有使用JAVA 语言编写程序经验;
3、熟悉Oracle,SQLServer,MySQL中至少一种数据库;
4、熟悉Eclips 开发工具使用,对于面向对象具备一定的认识;
5、较好的责任感和抗压能力,具备主动学习精神;
6、性格良好,较好的团队沟通能力。
大数据开发工程师岗位职责 篇12
1、协助开发人员SQL调优;
2、负责软件产品发布过程的数据库备份/恢复,包括相关脚本的编写、数据库脚本版本控制;
3、负责数据库方案规划,及新数据库技术或工具的研究/引入;
4、通过运用一系列工具和编写脚本,完成对开发/测试/生产/容灾环境的数据库的搭建、配置等工作,实现数据库持续快速交付;
5、完善数据库监控自动化,包括基础设施部分和性能部分;
6、参与项目上线版本评审;
7、引进sql审核工具,制定数据库用户密码策略,完善安全管控;
8、编写各类数据库规范性文。
大数据开发工程师岗位职责 篇13
1、负责公司内部软件产品的WEB服务器端、APP后台的设计与开发;
2、官网(php)的`修复开发,及二次开发
3、同时兼前端开发人员(小程序,微商城前端的开发)
4、精通PHP语言,精通HTTP等互联网协议;
5、有良好的沟通,良好的团队合作精神,能承受较大工作压力。
大数据开发工程师岗位职责 篇14
职责:
1、参与产品初期的需求定义
2、根据需求快速完成开发方案设计
3、高效完成功能开发
4、功能自测、代码定期自查、框架及系统完善
5、参与日常的功能快速迭代,完成开发、自动化测试到产品发布的整个流程。
任职要求:
1、扎实的计算机编程及网络基础,熟悉常用软件设计模式
2、3年以上PHP开发经验,熟练练使用PHP框架,有一个以上Laravel或Swoft的完整项目的开发经验
3、熟练使用MySQL数据库,对索引、锁和事务有了解,有并发处理和调优经验
4、熟练使用Redis、Memcache等常见非关系型数据库
5、熟练使用HTML、CSS、Javascript、Jquery、Vue等前端技术,有Vue实际使用经验
6、有支付、OSS、消息通讯等一种以上三方应用的集成经验
7、熟悉Docker、Git、及常用Linux 命令使用有,有生产服务器运维经验的优先
8、熟悉或掌握一种或以上其他服务端语言的优先
9、有SaaS系统、社交软件、直播平台高并发处理能力经验的优先
10、有责任心,具备良好的编码习惯,较强的学习及沟通能力。
大数据开发工程师岗位职责 篇15
职责:
1.负责产品的页面制作及维护,根据设计图完成页面html5应用的编码;
2.与设计师和后台程序配合,高效率高质量地完成页面的实现工作;
3.根据产品设计,利用HTML5和CSS3等相关技术开发手机端、网页端页面;
4.持续优化表现层界面在各类浏览器及终端的`兼容性适配及性能调优。
岗位要求:
1.计算机相关专业,本科及以上学历;
2.3年以上前端开发工作经验;大专4年以上
3.精通ry,了解W3C标准并严格按照标准进行开发工作;
4.了解ReactJs、zepto框架者优先;
5.对前端性能优化有深刻认识并具有实际项目优化经验;
6.有ios/android开发经营者优先。
大数据开发工程师岗位职责 篇16
职位描述:
工作职责:
1、设计和开发手机游戏服务器端,包括服务器架构和逻辑,数据库结构,通信协议;
2、服务器端的结构设计,核心代码编写;
3、协同客户端、策划和项目经理协调游戏的`需求和技术;
4、负责游戏服务器端各个功能模块的设计和实施。
任职要求:
1、大学本科及以上学历;
2、5年及以上Linux/Windows下C++网络开发经验;
3、熟悉TCP/IP协议及相关的编程接口,熟悉常见的网络应用开发模式,对网络安全问题有一定经验;
4、熟练使用MySQL;
5、熟悉代码优化,对常用的服务器优化技术有比较深刻的理解;
6、熟悉各种脚本技术,有实际Lua使用/优化经验者优先;
7、良好的表达、沟通能力和文档写作能力。
大数据开发工程师岗位职责 篇17
1. 建立和维护公司IT项目建设管理的规章制度;
2. 项目进度跟踪和控制,风险识别,里程碑监控、项目成本管理;
3. 根据公司IT系统需求和系统设计要求,进行详细分析、设计,编写设计文档,进行功能模块的代码编写工作;
4. 协助进行公司IT系统架构设计,技术规划及技术可行性分析,对公司IT系统架构方案提出优化改进建议,提高系统架构质量;
5. 根据开发规范编写各种开发文档及项目文档;
6. 评估项目交付件,对系统质量负责。
7. 对于开发外包项目,作为开发接口人与供应商进行系统开发对接,对开发进度进行管理控制,修正开发偏差。
8. 上级领导安排的其他工作。
大数据开发工程师岗位职责 篇18
职责:
1、项目中数据库系统的架构设计、开发、优化、安全;
2、根据项目需求设计数据库表与数据库结构。
3、数据库性能优化:表、字段、字节规范设计,分库分表,数据迁移;
4、数据库规范化文档编写及管理;
5、服务端的搭建,数据库存储和读取数据接口的编写。
任职要求:
1、本科以上学历,计算机或数学相关专业,有扎实的数据库基础知识;
2、两年以上数据库开发经验、熟练使用MySQL、SQLServer、Oracle等关系型数据库;
3、 熟悉LINUX、UNIX操作系统,熟悉java、C#或其他开发语言;
4、精通数据库基本理论及概念;
5、有大数据开发经验优先考虑;
6、能承受工作压力、有良好的团队合作精神。
大数据开发工程师岗位职责 篇19
职责:
1、负责PHP研发团队的流程管理,根据公司产品规划带领团队研发人员及时有效的完成研发任务。
2、负责网站的技术架构设计,完成开发项目工作量化,模块化分,任务分配,管理该团队的工作任务,合理分配,合理考核;
3、精通设计,开发,测试,运维的流程,并能通过项目管理的方法,提高团队的效率和产品质量,完成上级交给的其它任务;
4、定期组织部门学习和研究新技术以满足产品的需求;
5、结合用户体验,优化完善业务流程;
任职要求:
1、全日制本科及以上学历,计算机相关专业;
2、有B2B商城(进、销、存业务)开发经验;
3、千万级数据处理,数据采集,数据分析,微信开放平台接口,H5/小程序,了解阿里云,会阿里云opensearch优先考虑;
4、有中大型网站整体架构和设计的能力,完成过完整的项目周期;
5、熟练操作Linux,会编写中等难度shell脚本,熟练掌握linux、php、nginx、mysql性能调优;
6、精通PHP程序开发,熟练掌握swoole框架,熟练掌握redis,有良好的编程习惯;
7、精通MySQL数据库,有大数据实战经验,有良好的数据库设计能力(分库、分表、分区),精通sql性能调优,精通事务处理,熟练掌握存储过程、函数、触发器、事件,各种锁机制;
8、5年及以上项目开发经验,一年以上团队管理经验;
9、有热情有责任心,对团队管理有丰富的经验;
大数据开发工程师岗位职责 篇20
职责:
1、参与ERP项目整体方案规划、实施、监控以及运维,根据项目计划按时完成开发测试工作
2、协调处理ERP使用过程中出现的各种异常问题并及时给出反馈信息
3、根据各部门提出的需求进行可行性评估并给出相应的解决方案
4、针对系统遇到的技术难点进行重点研究,攻克技术难点或以其它可替代方案解决所遇到的问题
5、完成上级领导交办的其他工作
任职要求:
1、本科以上学历
2、3年以上Java开发工作经验,有项目管理经验
3、熟练使用springMVC、hibernate等J2EE开发技术,熟练掌握mysql数据库,有电商项目经验或较强的文档能力更佳
4、对数据结构、算法设计、系统架构设计等有较为深刻的理解
5、责任心强,有高度的服务及保密意识
大数据开发工程师岗位职责 篇21
职责:
1、负责局部模块的任务开发,并按照项目设计和进度要求编码和单元 ;
2、负责按照项目设计的数据库结构进行编码和单元;
3、根据开发规范与流程独立完成编码、及相关文档;
4、对重大的或批量的质量问题进行技术攻关,与团队其他成员一起及时解决项目开发过程中的关键问题和技术难题;
5、协助项目经理及质量保证人员保证项目的质量;
6、领导交付的其他任务;
7、公司内部与上级领导建立良好沟通,按时,按层级汇报工作。
任职资格:
1、正规高校专科科以上学历,计算机软件相关专业优先;
2、熟悉java语言,对数据结构有一定的了解;
3、熟悉springmvc架构,具备WEB应用开发经验优先;
4、了解JavaScript、jquery,AJAX、HTML、CSS等Web相关技术;
5、熟悉xml,json的校验,处理,解析,转换;
6、深入了解主流WEB开发框架,具备WEB应用性能优化经验和疑难问题的调试能力;
7、对WEB产品设计和用户体验有一定的认知;
8、具备良好的代码编程习惯、较强的文档编写能力、学习能力和沟通能力;
9、执行力强,能够及时完成领导交代的工作;
10、同时能够与领导建立良好的沟通,具备服从力、执行力。
大数据开发工程师岗位职责 篇22
1、负责系统的’概要设计和详细设计、编写相关技术文档。
2、负责核心功能需求分析与设计,编码、单元测试、功能交付。
3、负责组织规范团队的编码,和团队代码的审核工作,确保软件的性能、质量和安全。
大数据开发工程师岗位职责 篇23
1、完成软件系统代码的实现,编写代码注释和开发文档;
2、辅助进行系统的功能定义,程序设计;
3、根据设计文档或需求说明完成代码编写、调试、测试与维护;
4、分析并解决软件开发过程中的问题;
5、配合项目经理完成相关任务目标。
大数据开发工程师岗位职责 篇24
职责:
1. 负责相关项目的开发和维护,进行软件模块编码,确保安全、质量和性能;
2. 维护和升级现有软件产品,快速定位并修复现有软件缺陷;
3. 根据设计文档独立完成模块或项目的开发和测试。
4. 快速响应不断变化的需求。
任职要求:
1. 熟练掌握目前流行开源框架(spring/springmvc/mybatis)。
2. 熟练web开发和Java Script,熟悉并掌握目前流行的前端技术(jquery/Bootstrap/html5/css3)。
3. 对面向对象的软件开发思想有清晰的认识、熟悉掌握常用的设计模式;
4. 熟悉主流关系数据库Mysql、Oracle, 有sql调优经验。
5. 具有较强的责任心、能吃苦、良好的表达、沟通交流能力和团队协作精神。
6. 有良好的编程习惯,代码规范,善于整理开发文档,热爱技术。
大数据开发工程师岗位职责 篇25
职位描述:
1、基于人工智能的内容处理中台的建设,日处理上亿条内容,全体裁(图文音视频等)/业务(头条,抖音,tiktok等)/国家覆盖
2、接入数百个ai审核模型,并提供相关的数据集和流程机制,和算法团队一起持续优化模型和策略,提升内容审核的安全和效率,达到全球领先水平
3、参与平台/架构/策略的改进,可能的方向包括:
1)合理的机制抽象/流程设计/交互优化,为各角色提供良好的接入体验;
2)架构持续优化,多租户/限流机制/调度策略/稳定性等持续改进;
3)业务策略持续优化,提升业务的.内容审核安全和效率
任职要求:
1、热爱编程,扎实的编程能力,良好的数据结构和算法功底;
2、精通python、php、c++、java、golang中的至少一门语言;
3、责任心强,积极主动,有良好的沟通能力和团队合作能力;
4、有很好的产品意识,对业务流程有良好的抽象和总结能力。
大数据开发工程师岗位职责 篇26
职责:
1、生产应用系统开发及维护
2、负责代码的编写与测试,及软件系统框架设计与实现
3、生产应用系统相关报表需求开发与维护
任职要求:
1、熟Visual Studio(C#)开发工具与程序语言
2、熟练运用MS—SQL、Oracle等数据库,熟悉数据库工作原理,熟练编写存储过程,具有数据库性能调优的能力
3、熟悉Java核心技术,熟悉常用的’J2EE设计模式,有良好的编程习惯
4、了解MES生产报工系统,有MES实施经验优先考虑
大数据开发工程师岗位职责 篇27
职责描述:
1、有较强的数据处理和分析能力,较强的逻辑思维能力,对技术和数据都有很好的敏感度;
2、负责编写和维护公司的算法交易模型;
3、协助开发量化平台,编写策略相关的函数库等;
4、金融股票、期货程序化交易中各类高频数据的管理、维护、清洗;
5、协助交易数据的分析等;
任职要求:
1、毕业于理工类专业排名前10的高校,全日制本科以上学历,计算机、数学、物理等相关专业;
2、熟悉c/c++语言编程,熟悉linux/shell/python等应用场景,对算法和数据结构有较好理解
3、有较强的编程能力,必须会写c++;
4、熟悉c++11,python者优先;
5、熟悉linux多线程编程;
6、良好的沟通能力和团队协作精神;
大数据开发工程师岗位职责 篇28
职责:
1、负责数据库仓库模型设计及规划,数据仓库架构搭建和优化策略;
2、使用相关ETL工具和BI工具,支持中后台数据转换模型和技术开发;
3、负责数据库业务程序开发(包括脚本、函数、存储过程等)和优化以及数据质量技术保障;
4、根据金融业务的理解和经验,制定系统和数据库标准化的日常维护和操作手册;
5、编写数据库设计档,进行SQL代码规范审核。
任职要求:
1、具有扎实的数据库基础知识,开发经验3年以上;
2、熟练编写存储过程、函数、性能优化脚本,能独立进行排错、调优;
3、精通oracle或greenplum数据库开发或管理,有OCP认证优先;
4、沟通能力强,语言表达清晰,思维严谨,细致认真,具有良好的团队合作精神;
5、金融证券行业相关经验优先。
大数据开发工程师岗位职责 篇29
职责:
1.负责产品的页面制作及维护,根据设计图完成页面html5应用的编码;
2.与设计师和后台程序配合,高效率高质量地完成页面的实现工作;
3.根据产品设计,利用HTML5和CSS3等相关技术开发手机端、网页端页面;
4.持续优化表现层界面在各类浏览器及终端的兼容性适配及性能调优。
岗位要求:
1.计算机相关专业,本科及以上学历;
2.3年以上前端开发工作经验;大专4年以上
3.精通HTML5.CSS3.Javascript.jQuery,了解W3C标准并严格按照标准进行开发工作;
4.了解ReactJs、zepto框架者优先;
5.对前端性能优化有深刻认识并具有实际项目优化经验;
6.有ios/android开发经营者优先。
大数据开发工程师岗位职责 篇30
1、 家电产品内部结构及装配设计,有智能家电开发经验者优先;
2、 负责参与新产品整体结构设计方案设计,确定产品的结构设计方案和项目计划,完成样机试制,确定零部件的详细设计;
3、 能够结合工业设计、市场反馈、用户体验、产品品质综合确定产品的结构设计方向;
4、 负责样品分析,参与试产、对产品可靠性、工艺性、合理性负责。
大数据开发工程师岗位职责 篇31
1. 负责AGV调度软件的开发;具备静态/动态路径规划,交通管制,任务调度,监控及报警,调度仿真等功能.
2. 调度系统功能扩展、算法模型优化、调度性能优化,提升调度系统运行效率;
3. 完成调度系统编码、单元测试、集成测试、仿真测试等工作;
4. 进行调度软件与其它系统(如ERP、MES、WMS、SPS等系统)的数据接口开发;
5. 按照项目计划,提交高质量的代码,按时完成开发任务;
6. 完成软件系统框架设计,概要设计,详细设计,模块设计,软件测试需求,软件测试与验证文件,软件功能说明书,软件集成测试文件归档。
大数据开发工程师岗位职责 篇32
职责
1、负责公司自有项目的服务器后端程序的技术研发工作,包括技术架构设计、重构、优化,根据产品规划及技术规划制定应用架构方案;
2、负责公司项目核心功能、数据总线解决方案及第三方接口的开发,主导技术难题攻关,持续提升核心系统在高并发、海量请求数下的高处理性能,编写程序,单元测试,bug修复工作等;;
3、负责设计、编码和调试研发平台后端技术框架,优化及提高后端代码的性能,审核和评估相关方案与设计,以确保其符合架构规划,满足业务需求;
4、分析系统瓶颈,解决各种疑难杂症,对系统进行性能调优,指导程序员编写程序,落实技术规范,与产品经理、测试工程师、其他成员沟通合作,保证产品研发工作的质量和进度;
岗位要求
1、软件工程或计算机相关专业大专以上学历,3年以上商业项目的实际开发经验,有电商或短视频项目的实际开发经验;
2、精通ThinkPHP、Laravel、Yii等流行框架,熟练掌握LAMP,熟悉TP/SMARTY;
3、精通MySQL、NOSQL、MongoDB等数据库,能够编写和优化复杂的SQL程序;
4、擅长消息队列、任务调度、负载均衡、并发控制,极具面向对象思维,懂得低耦合高复用封装,拥有一丝不苟的代码编写规范习惯;
5、熟悉Unix/Linux操作系统,熟练掌握shell、Python、Perl其中一种脚本语言;