大数据环境下的意图搜索技术!

尽管大数据已呈爆炸式增长,以致带动不少相关技术的衍生与发展。但是,不少人还是对大数据技术的作用感到云里雾里。今天,就跟随 大圣众包威客平台 一起看看大数据的其中一项重要技术——意图搜索技术。

一、大数据环境下的意图搜索技术的利弊

我们都知道,在大数据时代,任何在网络行为中留下的“蛛丝马迹”都以数据的形式被隐藏在大数据中,并通过应用物联网、大数据、人工智能等技术,构建成网络空间中的行为事件、思想事件等模型。

显然地,这种模式最大的风险是,它将面临信息安全问题。因为,在实体空间和虚拟空间中,它会全面收集、甄别、过滤、分类、整合人的存在痕迹和联系信息,并关注人物或事件之间的联系链,从而实现网络空间中存在的各种意图。

当然,把这项技术的监管做到位,它的优势还是大大存在的。大数据环境下的意图搜索技术最重要的意义是,它能完成对意图产生源头、传播途径和发展趋势的全方位描述,以达到对个人和组织的所思所想行为所在的全面搜索和分析,帮助个人或企业、政府做到提前预警、智能决策。所以,现今我国正针对各种安全事件进行积极的应对,尤其是新时期的各种安全威胁,并运用大数据技术和人工智能技术进行深入分析,实现对安全事件的准确识别和提前预警。这样,能够有力提升我国基于大数据兴盛背景的国家安全防护能力,同时,个人隐私和信息安全的也能得到大大的保障。

二、针对这种现状,我国所采取的措施

面对这种局面,我国将执行怎样的措施去应对呢?纵观目前,我国的巨头互联网公司以及安防企业正积极应对这个问题,通过各界的努力,我国现正处于当今的技术和应用的前沿。从整体上来看,在商业开放和应用方面也具备一定的国际竞争力,尽管从大数据智能搜索应用于国家安全防护上还需进一步努力,但前景仍十分明朗。

三、展望将来,我国欲取得的目标成果

简单来说,大数据环境下的意图搜索技术,将是构建一个虚拟空间信息社会雷达的系统。这个系统的主体是搭建一个完整的知识库,并开发意图搜索引擎系统、构建云计算与大数据的基础设施平台。其中,这个搜索引擎系统将会包括搜集器、控制器、索引器、检索器、用户接口、处理分析系统。在技术成果上,我国将取得人工智能、智能推理及知识研发、信息提取与分析技术、虚拟化工具、系统运行保障研发、系统算法、信息检索能力研发等技术上的突破成果。要实现这些成果,并非一朝一夕的事情,其中的关键技术需要全盘掌握与运用。

四、我国需要全盘掌握与运用的关键技术

1.大数据技术

因为,对数据进行收集、存储、处理、挖掘分析是搜索技术的基本环节,因此以数据存储、数据挖掘等技术为主的大数据技术也是意图搜索的关键技术之一。主要相关的大数据技术有:数据采集、数据存储、数据处理、数据挖掘与分析技术等。

2.物联网技术

毕竟,随着传感器的发展和移动化的能力,意图搜索也呈现出多样化的形态。因此,以传感器技术为主的物联网技术也是意图搜索的关键技术之一。

3.人工智能技术

为什么说人工智能技术将是意图所搜的核心技术呢?因为,意图搜索引擎构建了人与信息的意识主动化的连接,并且通过不断的交换学习,形成模拟人脑的智能系统,从而实现人与机器的相互了解。而主要相关的人工智能技术有:机器深度学习、计算机神经网络、脑机接口、自然语言处理等技术。

4.其他信息技术

一项伟大的技术,背后还需要多方技术的支持。因此,搜索实现从传统搜索到人工智能的过渡,还需要硬件存储、分词技术、云计算、超级计算、知识图谱等相关技术的成熟。

相信,在政府和各部门的努力下,大数据环境下的意图搜索技术将得到进一步的发展,在政府的信息安全防护下,个人与企业也能放心徜徉于互联网中,不用为个人隐私和信息泄露而惴惴不安。

本文作者:大圣众包平台

来源:51CTO

时间: 2024-10-03 09:45:48

大数据环境下的意图搜索技术!的相关文章

大数据环境下的综合布线技术探析

ZDNET网络频道 05月10日 综合消息:随着移动互联网技术的不断发展,移动互联网用户发送和上传的数据量达到1.3exabytes,相当于10的18方.BigData"大数据"是继 云计算.物联网之后TI产业又一次颠覆性的技术变革.当今信息时代所产生的数据量已经大到无法用传统的工具进行采集.存储.管理与分析.全球产生的数据 量,仅在2011就达到1ZB,且根据预测,未来十年全球数据存储量将增长50倍.大数据不是云计算,是云计算的灵魂和升级方向. 1.大数据时代网络挑战 全世界联网主机

大数据时代下的意图搜索 个性化服务是关键

意图搜索起源于互联网搜索引擎,是基于互联网上海量的无组织.异构.动态的数据与信息环境下搜索引擎不能准确理解用户的搜索意图而提出的,利用如神经网络算法等机器学习方法实现智能化的自动搜索,从而更加精准.主体的提供个性化的服务. 大数据时代下的意图搜索个性化服务是关键 一.目的意义 大数据时代,任何网络行为所留下的"蛛丝马迹"都以数据的形式隐藏在大数据中,正所谓"存在就有痕迹,联系就有信息",通过应用物联网.大数据.人工智能等技术,构建网络空间中行为事件.思想事件等模型.

深度解读:大数据时代的意图搜索

意图搜索起源于互联网搜索引擎,是基于互联网上海量的无组织.异构.动态的数据与信息环境下搜索引擎不能准确理解用户的搜索意图而提出的,利用如神经网络算法等机器学习方法实现智能化的自动搜索,从而更加精准.主体的提供个性化的服务. 一.目的意义 大数据时代,任何网络行为所留下的"蛛丝马迹"都以数据的形式隐藏在大数据中,正所谓"存在就有痕迹,联系就有信息",通过应用物联网.大数据.人工智能等技术,构建网络空间中行为事件.思想事件等模型.在实体空间和虚拟空间中全面收集.甄别.过

大数据环境下的地税预算执行审计

看起来纷繁复杂的海量数据资料,通过分析,可以发现很多有用的信息,可以告诉我们很多隐藏在数字背后的秘密,并有效提高决策的准确性.淘宝根据购物记录可以推荐买家可能会喜欢的商品,餐厅根据用餐记录可以推荐消费者可能喜欢的菜单.大数据审计分析可以通过对相关领域长年累月形成的数据的分析,挖掘出某种群体行为的特点,提示某种社会现象的潜在规律,为政府制定政策提供关键依据,同时还可以评估政府政策的实施效果,从而帮助政府不断发现问题,改进问题.下面笔者结合自己从事的地税审计业务浅谈在大数据审计分析中的心得体会,以达

大数据环境下的多维分析技术

之前我们有一篇文章< 一文读懂多维分析技术(OLAP)的进化过程 >为大家介绍了多维分析技术(即联机分析处理(On-Line Analytical Processing),简称OLAP)的前世今生及发展方向.正是由于多维分析技术在业务分析系统的核心功能中的不可替代性,随着商业智能系统的深入应用,分析系统的数据量呈指数级增长,原有依赖硬盘IO处理性能(包括传统数据库.多维立方体文件)的多维分析技术遭遇到性能瓶颈.与此同时,随着服务器内存价格的下降,一种新的基于内存的OLAP技术架构出现了.这种新

机器智能加速器:大数据环境下知识工程的机遇和挑战 | 清华李涓子教授

李涓子,清华大学计算机科学与技术系教授,博士生导师.清华-青岛数据科学研究院科技大数据研究中心主任.中国中文信息学会语言与知识计算专委会主任.中国计算机学会术语委员会执行委员.研究兴趣是语义 Web,新闻挖掘与跨语言知识图谱构建.多篇论文在重要国际会议(WWW.IJCAI.SIGIR.SIGKDD)和学术期刊(TKDE.TKDD)上发表.主持多项国家级.部委级和国际合作项目研究,包括国家自然科学基金重点项目.欧盟第七合作框架.新华社项目等.获得 2013 年人工智能学会科技进步一等奖,2013年

【阿里云产品公测】大数据下精确快速搜索OpenSearch

相信做过一两个项目的人都会遇到上级要求做一个类似百度或者谷歌的站内搜索功能.传统的sql查询只能使用like 或者FIND_IN_SET来实现.后者性能稍微好点但是必须要逗号分隔才可以实现匹配.甚至多条件的话还可能用到OR这是极影响系统性能的.        最近公司项目需要.主要是系统查询缓慢.并且查询精度不敢恭维.一开始想到的是Lucene 毕竟是一个开放源代码的全文检索引擎工具包 并且官方还在持续更新中.当时闲暇时间大概搞了将近一个星期的时间.索引的增删查改以及中文分词IKAnalyzer

大数据环境下的社科文献情报研究

信息技术正飞速发展,互联网已被普及利用,各种终端设备记录了人类社会复杂频繁的信息行为,从而产生了惊人的数据量.在大数据时代,数据分析被提升到了前所未有的高度.这无疑会给社会科学文献情报研究带来巨大的挑战,同时也使它迎来了重要的发展契机.本文对大数据分析和社会科学文献情报研究的关系进行对比研究,同时对大数据环境下社会科学文献情报研究的发展趋势进行展望. 大数据分析(Big Data Analytics,BDA)是指对大数据进行分析,从中找出可以帮助决策的隐藏模式.未知的相关关系以及其他有用信息的过

XFS:大数据环境下Linux文件系统的未来

本文讲的是XFS:大数据环境下Linux文件系统的未来,Linux有好多种件系统,但往往最受关注的是其中两种:ext4和btrfs.XFS开发者Dave Chinner近日声称,他认为更多的用户应当考虑XFS.他谈到了为了解决XFS中最严重的可扩展性问题所做的工作,还谈到了他认为将来的发展走向.如果他说的一点都没错,接下来几年我们在XFS方面有望看到更多的动静. XFS经常被认为是适合拥有海量数据的用户的文件系统.Dave表示,XFS非常适合扮演这个角色;它对许多工作负载而言向来表现不俗.以前往