请教异地异构数据发布平台怎么做?

问题描述

最近要搭建一个数据平台,需按‘物理分散,逻辑集中’的要求把分散在多家单位的数据统一发布。应该采用什么技术呢,是分布式数据库、WEBSERVICE、网格技术还是云计算Hadoop??望各位大侠指点!本人会phhp+mysql,谢谢!

解决方案

解决方案二:
如果只是找到一个能够统一存储的地方,hadoop的hdfs就够了,要会java
解决方案三:
你需要的是ETL领域的相关知识。。。php+mysql估计帮不上什么忙。。。。

时间: 2024-09-23 21:07:26

请教异地异构数据发布平台怎么做?的相关文章

高可用的大数据计算平台如何持续发布和演进

2016年11月18-20日SDCC 2016中国软件开发者大会,阿里巴巴大数据计算平台首席架构师林伟给我们带来了"高可用的大数据计算平台如何持续发布和演进"的演讲.本文主要谈及大数据系统如何做系统迭代,以及大规模系统因为其大规模没有可能搭建对等的测试环境,需要进行在线测试方面的内容,更有在线测试需要的必要条件等等. 阿里巴巴大数据计算平台需要每天不间断的跑在上万台机器集群上,上面承担阿里核心分析计算任务,有着很高的可靠性和SLA的要求,但是我们同时需要持续不断提高系统的性能,降低成本

百会CRM教你在大数据平台中做精准营销

ZD至顶网CIO与应用频道 12月28日 北京消息:朋友圈广告的变化你注意到了吗?展示的品牌越来越多,对外开放程度越来越高,将来你的企业广告也会出现在这里.面对拥有海量客户的大数据平台,你知道该如何选择投放条件吗?如何实现投入少.收效高的精准营销吗? 精准营销必然要有精准的数据支持,首先平台能为企业提供详细的投放条件,如年龄段.所在地区.年收入等标签:其次企业要知道自己的客户画像,如何选择标签才能覆盖到高质量客户.现在企业客户服务意识逐渐提升,但对客户数据分析重视还不够,客户数据正在公司的exc

高德联合菜鸟发布物流行业数据开放平台

近日,高德地图与菜鸟网络在京联合发布物流数据开放平台,双方将打通底层地址数据,为开发者提供基于LBS技术的物流配送服务,高德通过用户数据回传,不断更新.完善已有数据,反哺给第三方. 高德先进数据生产能力助力物流行业 高德拥有最全的道路数据,以及目前最精确的路况服务,未来还将提供货车导航服务,进一步服务专业的物流客户.目前国内领先的物流O2O应用大都采用了高德基于LBS技术的叫单.接单智能化系统,借助定位.路径规划.导航等功能,结合物流配送流程中的各个环节,从而将整个物流配送的过程实现智能化.当天

普元最新发布数据集成平台 完善SOA集成方案

中介交易 SEO诊断 淘宝客 云主机 技术大厅 2013年1月,国内最大的平台软件厂商普元发布数据集成平台Primeton DI v6有限使用版.作为专业的企业数据集成引擎,该版本可基本满足企业各种数据处理需求,且具有微内核.插件式特征,简单易用,可为金融.电信.能源等行业用户带来了更符合国内用户特征的数据集成产品支撑.同时该版本的推出也完善了普元平台产品家族,成为整体SOA应用集成解决方案的一部分. 据统计,企业数据往往每2-3年时间就会成倍增长,这些数据蕴含着巨大的商业价值,而企业所关注的通

阿里云大数据计算平台的自动化、精细化运维之路

免费开通大数据服务:https://www.aliyun.com/product/odps 作者简介:   范伦挺 阿里巴巴 基础架构事业群-技术专家 花名萧一,2010年加入阿里巴巴,现任阿里巴巴集团大数据计算平台运维负责人.团队主要负责阿里巴巴各类离在线大数据计算平台(如MaxCompute.AnalyticDB.StreamCompute等)的运维.架构优化及容量管理等 1.前言 本文主要会从以下四个方面来写,分别是: 阿里大规模计算平台运维面临的一些挑战: 阿里自动化平台建设: 数据精细

用PowerShell管理异构数据中心

  不要反对其他虚拟化平台进入你的数据中心.企业往往需要更低的成本或者需要找到替代的解决方案,IT专业人员在管理异构虚拟环境时往往面临挑战.不要让这一挑战超出必要的限度.作为一名IT专业人士,应该关注统一的管理平台,减少学习曲线,始终保持对控制异构数据中心大量系统的灵活性. 图形管理工具是解决之道吗? 在了解了不同厂商虚拟化平台之间的差异后,你面临的挑战就是如何对这些平台进行管理.你不想在不满足需求的工具上浪费时间以及投资成本. 很多IT专业人员首先倾向于找到一款GUI工具来帮助他们管理整个异构

阿里巴巴大数据计算平台MaxCompute(原名ODPS)全套攻略(持续更新20171122)

  概况介绍 大数据计算服务(MaxCompute,原名ODPS,产品地址:https://www.aliyun.com/product/odps)是一种快速.完全托管的TB/PB级数据仓库解决方案.MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问题,有效降低企业成本,并保障数据安全.本文收录了大量的MaxCompute产品介绍.技术介绍,帮助您快速了解MaxCompute/ODPS. MaxCompute 2.0:阿里巴巴的大数

阿里内部分享:大数据业务平台两年发展历程

      这篇文章来自一个公司内部的分享,是自己所服务的业务中数据平台的发展历程,已经讲了有几个月了,最近打算挑几个点拿出来用文章的形式写出来.是自己进入公司以来参与过或者接触过的数据型项目的情况.基本包含了业务数据分析的整个流程.这篇文章纯文字描述,没有任何图呵呵.所以看我需要耐心. 1.最早的数据分析可能就报表 目前很多数据分析后的结果,展示的形式很多,有各种图形以及报表,最早的应该是简单的几条数据,然后搞个web页面,展示一下数据.早期可能数据量也不大,随便搞个数据库,然后SQL搞一下,

如何在异构数据中心充分利用虚拟技术

虚拟技术旨在减少服务器数量.优化资源使用.但是,如果部署不当,虚拟化也可能使组织机构遭受损失.利用虚拟技术,组织机构可以瞬间移动资源,但错误的移动却会使用户性能受到损害,同时增加管理成本. 随着异构数据中心的复杂性日益增加,虚拟项目的规模也不断扩大.数据中心不仅要管理多个平台,还要管理无数个管理程序.操作系统甚至虚拟工具,由此导致管理复杂性成指数级增长.此外,虚拟机能够快速扩展,导致资源利用率下降,IT综合管理成本超支. 不过,组织机构可以采用虚拟管理技术,将IT环境从封闭式资源转化为"效用计算