大数据平台的发展会降低程序员的价值吗?

针对本题,粗略地把研发人员的能力分为以下3类:

业务逻辑研发的能力 将业务逻辑转化为代码实现的能力。

系统架构的能力 高并发高负荷系统的设计实现能力,系统底层服务的研发能力。

特殊领域: 机器学习,自然语言,搜索推荐,语言与框架的开发等特殊的小众领域,暂不做讨论。

业务逻辑研发的能力
对于只关注业务研发的同学来说,的确影响不大,而且随着云服务商对各种服务提供更完善的工具,业务研发的同学工作会更加轻松和高效,例如阿里云数加提供的大数据平台服务,可以很方便地实现各种大数据解决方案。

系统架构的能力
这里是影响最大的一层,举例栗子:某个业务我们需要一个MongoDB、Oracle集群,要考虑数据分片,主备库,队列延迟写入,读取加缓存等模块, 随着业务的发展,还需要持续的加机器。而现在MaxCompute(比Hadoop更方便易用、更安全、成本更低)等服务出来以后,底层的服务他们已经封装过了,只需要简单的调用API这些服务就可以跑起来,而且可以跑的挺欢实,而这些的学习成本是很低的,几页的文档就可以开始用了(现在这些云服务还不够强大,那个业务仍然使用MongoDB集群)。诸如此类,缓存框架等等也都会有替换品。

目前,系统架构无疑技术含量比较高的领域之一,有经验的技术人员会在这个领域深入来增加自己技术上的竞争力,被云服务替换之后,没有了实际的生产环境,这里慢慢地会成为屠龙之术,学习条件也会大为恶化。 到那时想专注系统技术的同学只能去各个云服务商或者巨型公司了。

以公司的角度来说,用云服务几乎是必然,成本低而且稳定。中小公司对具有系统架构能力的架构师的需求会越来越小,随着云服务的进一步发展和普及,将来除了云服务公司和巨型公司,几乎不需要什么架构师,现在觉得这个结论还有些绝对,但就和我们现在写代码基于Java/PHP 而不用汇编一样,技术的发展会逐渐封装底层的技术细节,留给上面越来越纯粹的业务细节,技术人员的主要价值就会在于 对业务的理解,语言框架的使用和各种云资源的整合,而这些的技术门槛实在不高,新人工作一两年可以轻松的赶上。


再回到题主的问题,结论是:对高级技术人员的影响的确存在,而且非常大,中小公司的系统架构师需求会逐渐削弱甚至淘汰。


文章转载鼎点网络

阿里巴巴大数据-玩家社区  /

---阿里大数据博文,问答,社群,实践,有朋自远方来,不亦说乎……

时间: 2025-01-03 08:10:35

大数据平台的发展会降低程序员的价值吗?的相关文章

大数据平台技术发展脉络

作为集团"大数据平台技术"战略研究的准备工作,本文梳理了近年来作者观测到的大数据行业技术演进的路径,希望把握发展脉络,找到适合公司业务实际的方向.文章力求用通俗的方式描述概念,最大程度减少专业图表与细节,以便向公司管理层与业务部门同事介绍大数据平台技术的发展与趋势,这里分享给金融行业的朋友参考. 数据技术演进 软件系统,小到HelloWorld编程入门,大到数亿人同时使用的社交软件.搜索引擎,或者是基于公有云的软件即服务(SaaS),本质上都是在处理两件事情:业务逻辑与数据.随着信息时

贺易搜易淘合作站长 共铸地球村大数据平台

中介交易 SEO诊断 淘宝客 云主机 技术大厅 2014年第三届渠道网创业加盟博览会隆重闭幕!易搜易淘"罗浮宫杯"百天百家个人渠道商城站长招募活动继续拉开帷幕,欢迎全国各地企业与个人关注和了解,我们期待您的加入,共铸辉煌.共同努力.共同发展.共同赚钱! 中国这只狮子,已经开始醒了,中华民族最伟大复兴的中国梦需要我们还在装睡的狮子睁开眼睛,一起走进易搜易淘电商开放平台,一起并肩合作,团结起来,共同努力,共建地球村大数据平台--"易搜易淘电商全供应链一体化共业平台".

“平台、金融、大数据”三大未来发展策略

阿里巴巴很早前就确定了"平台.金融.大数据"三大未来发展策略,而京东商城也在年初确定了"自营电商.开放服务和数据金融"三大未来发展规划,双方都觊觎互联网金融这块大蛋糕.在前两天召开的平台合作伙伴大会上,刘强东表示京东已经成立金融集团,未来将向POP开放平台开放. 在此之前,京东上线了"供应链金融"服务,初次尝试互联网金融业务."供应链金融"的本质是是利用京东自身的信用和规模为商家做担保,帮助商家能够方便顺利地从银行贷款,而非拿

全球各国大数据市场的发展现状

1 大数据发展概述 当今是一个数据爆发增长的时代.移动互联网.移动终端和数据传感器的出现,使数据以超出人们想象的速度快速增长.据调查机构估测,数据数量一直在快速增加,这个速度不仅是指数据流的增长,而且还包括全新的数据种类的增多.目前数据容量增长的速度,已经大大超过了硬件技术的发展速度,并正在引发数据存储和处理的危机.据统计,2013年全球产生的数据达到3.5泽字节,到2020年产生的数量将增至44泽字节. "大数据"一词来自于未来学家托夫勒于1980年所著的<第三次浪潮>.

从存储、实时、安全的角度谈如何建立完整可用的企业大数据平台

要建立一个大数据系统,我们需要从数据流的源头跟踪到最后有价值的输出,并在现有的 Hadoop 和大数据生态圈内根据实际需求挑选并整合各部分合适的组件来构建一个能够支撑多种查询和分析功能的系统平台.这其中既包括了对数据存储的选择,也涵盖了数据线上和线下处理分离等方面的思考和权衡.此外,没有任何一个引入大数据解决方案的商业应用在生产环境上承担的起安全隐患. 1. 计算框架篇 大数据的价值 只有在能指导人们做出有价值的决定时,数据才能体现其自身的价值.因此,大数据技术要服务于实际的用途,才是有意义的.

大数据产业迅猛发展 解读2017年八大趋势

弗雷斯特研究公司的研究人员发现:2016年,近40%的公司在实施大数据技术,并且扩大了采用力度.另有30%的公司计划在未来12个月内采用大数据技术. 迅猛发展的互联网将我们带入了大数据时代,大数据已经成为发展中不可或缺的力量支撑,那些专注于数据挖掘和数据服务的公司同样成为不可低估的新兴力量.在已经走完的2016年里,我们见证了大数据的应用与变革,2017年,大数据的世界又将发生怎样的变化? 大数据的发展 在预测未来之前,先来看看大数据近四年的发展.2013年被成为大数据元年,发展至今,新的技术不

阿里十年经验输出,大数据平台“数加”的前世今生

2016 年1月20日,在云栖大会上阿里云发布了一站式大数据平台"数加",该平台集合了阿里巴巴十年的大数据能力以及上万名工程师实战检验,该平台是一站式的解决方案,首批亮相20款产品,覆盖数据采集.计算引擎.数据加工.数据分析.机器学习.数据应用等数据生产全链条. 数加平台由大数据计算服务(MaxCompute).分析型数据库(Analytic DB).流计算(StreamCompute)共同组成了底层强大的计算引擎,速度更快.成本更低.计算引擎之上,"数加"提供了丰

DockOne微信分享(九十九):海航生态科技舆情大数据平台容器化改造

本文讲的是DockOne微信分享(九十九):海航生态科技舆情大数据平台容器化改造[编者的话]海航舆情监控系统能够为海航集团内部提供监控网络舆情信息,对负面信息.重大舆情及时预警,研判具体舆情或者某一舆情专题事件的发展变化趋势,生成图标报告和各种统计数据,提高舆情工作效率和辅助领导决策.然而,随着项目的持续运行,许多问题逐渐暴露出来,为了解决这些难题,对整个项目重新规划设计,迁移到Hadoop.Spark大数据平台,引进持续化Docker容器部署和发布,开发和运营效率得到显著提升. 一. 舆情平台

为什么选择这样的大数据平台架构?

当前BAT基本公开了其大数据平台架构,从网上也能查询到一些资料,关于大数据平台的各类技术介绍也不少,但在那个机制.那个环境.那个人才.那个薪酬体系下,对于传统企业,可借鉴的东西也是有限的. 技术最终为业务服务,没必要一定要追求先进性,各个企业应根据自己的实际情况去选择自己的技术路径. 与传统的更多从技术的角度来看待大数据平台架构的方式不同,笔者这次,更多的从业务的视角来谈谈关于大数据架构的理解,即更多的会问为什么要采用这个架构,到底能给业务带来多大价值,实践的最终结果是什么. 它不一定具有通用性