《移动数据挖掘》—— 导读

前 言

     大约在十年前,本书作者所在的研究团队,也就是目前的微软亚洲研究院社会计算组,对挖掘人群移动数据中隐藏的知识产生了兴趣。这个团队在2007年开展了GeoLife项目,通过用户主动分享的移动数据来研究用户的出行模式,为旅游规划等应用提供支持。基于这个项目在WWW 2009大会上发表的论文“Mining interesting locations and travel sequences from GPS trajectories”目前引用数已经上千,在学术界产生了一定的影响。本书第一作者,目前在电子科技大学任教的连德富教授,长期针对基于移动数据的推荐系统进行研究,发表了大量有影响力的研究成果。在过去十年,随着室内外定位、移动社交网络和物联网技术的发展与普及,移动数据的种类、规模和产生速度一直在迅速增加。这些数据中很大一部分是由人产生的,也就是通过各种方式记录下来的人的活动历史。它们包含了大量的知识,对于众多实际应用有着重要的价值。我们可以通过对这些数据进行挖掘,发现人类出行的规律,并针对用户的属性和兴趣爱好生成画像,从而为用户提供更加个性化的服务,包括交通出行规划、旅游线路和购物餐饮推荐等。这些知识还能用来研究疾病传播、城市发展以及人类迁徙等具有重大社会意义的科学问题。在实际应用中,移动数据的形式多种多样,既有来自移动社交网络的签到数据,来自运营商的日志数据,也有来自公交计费系统的刷卡记录数据,还有很多并不是由人产生的数据,例如由车辆、船舶甚至动物的移动生成的数据。在本书中,我们试图以人群移动数据为例,探讨和设计针对移动数据的数据挖掘算法,并指出在该领域展开研究将面临的挑战,希望这些经验也同样能应用到其它类型的移动数据上。编辑为本书封面选取了清代苏州籍宫廷画家徐扬的巨幅长卷画作《姑苏繁华图》。在画中,画家通过自己对城市的理解,重现了苏州“商贾辐辏,百货骈阗”的市井风情。令人惊叹的是,据说全画中有各色人物1万2千余人。将他们的活动一一刻画出来是一个浩大的工程,反映了画家对苏州居民生活和出行规律的深刻理解,这也完美呼应了本书的主题。最后,我们希望本书能帮助有兴趣研究移动数据挖掘的读者缩短学习的过程,共同推进该领域的研究进展。

目 录

前言
第1章 引言
  1.1 移动数据及其价值
  1.2 概念与定义
  1.3 挑战
  1.4 本书简介
第2章 移动数据预处理
  2.1 移动数据简介
  2.2 缺失数据补全
    2.2.1 公交卡的上下点补全
    2.2.2 地点类别补全
  2.3 重要地点检测
  2.4 语义信息标注
    2.4.1 区域功能标记
    2.4.2 地点命名
第3章 用户移动建模
  3.1 基于人类动力学的移动建模研究
    3.1.1 连续时间的随机游走模型
    3.1.2 引力模型
  3.2 基于时空数据挖掘的移动建模研究
    3.2.1 马尔可夫链模型
    3.2.2 时间规律性模型
    3.2.3 时空降维模型
    3.2.4 社交关系影响
    3.2.5 新颖地点预测
    3.2.6 预测算法的融合
第4章 基于移动数据的用户画像
  4.1 显性属性预测
    4.1.1 移动数据和显性属性的关联
    4.1.2 位置画像模型
  4.2 隐性属性预测
    4.2.1 猎奇心理特质挖掘
    4.2.2 消费冲动心理挖掘
第5章 个性化兴趣地点推荐
  5.1 协同过滤
    5.1.1 基于邻域的方法
    5.1.2 基于社交相似性的协同过滤
    5.1.3 基于模型的方法
  5.2 基于内容的过滤
    5.2.1 内容过滤方法简介
    5.2.2 地理建模
    5.2.3 文本内容与情感分析
  5.3 混合方法
    5.3.1 混合模型基本方法
    5.3.2 地理建模和协同过滤的联合模型
    5.3.3 社交正则化的矩阵分解
    5.3.4 内容感知的协同过滤方法
    5.3.5 集成学习
  5.4 情境感知的协同过滤方法
    5.4.1 时间感知的地点推荐
    5.4.2 序列化地点推荐
  5.5 地点推荐系统的评价
第6章 结语

时间: 2024-12-04 23:02:44

《移动数据挖掘》—— 导读的相关文章

《深入理解Scala》——第1章,第1.2节当函数式编程遇见面向对象

1.2 当函数式编程遇见面向对象 深入理解Scala 函数式编程和面向对象编程是软件开发的两种不同途径.函数式编程并非什么新概念,在现代开发者的开发工具箱里也绝非是什么天外来客.我们将通过Java生态圈里的例子来展示这一点,主要来看Spring Application framework和Google Collections库.这两个库都在Java的面向对象基础上融合了函数式的概念,而如果我们把它们翻译成Scala,则会优雅得多.在深入之前,我们需要先理解面向对象编程和函数式编程这两个术语的含义

《深入理解Scala》——第1章,第1.4节与JVM的无缝集成

1.4 与JVM的无缝集成 深入理解Scala Scala的吸引力之一在于它与Java和JVM的无缝集成.Scala与Java有很强的兼容性,比如说Java类可以直接映射为Scala类.这种紧密联系使Java到Scala的迁移相当简单,但在使用Scala的一些高级特性时还是需要小心的,Scala有些高级特性是Java里没有的.在Scala语言设计时已经小心地考虑了与Java无缝交互的问题,用Java写的库,大部分可以直接照搬(as-is)到Scala里. 1.4.1 Scala调用Java 从S

《深入理解Scala》——第2章,第2.1节学习使用Scala交互模式(REPL)

第2章 核心规则深入理解Scala 本章包括的内容: • 使用Scala交互模式(Read Eval Print Loop 简称REPL) • 面向表达式编程 • 不变性(Immutability) • Option类 本章内容覆盖了每个新Scala开发者都需要知道的几个主题.本章不会深入到每个主题里,但是会讲到可以让你自己去接着探索的程度.你将学会使用REPL,学会如何利用这个工具做软件的快速原型开发.然后我们会学到面向表达式编程,并从另一个视角来看控制结构是怎么回事.在此基础上,我们来研究不

《深入理解Scala》——第1章,第1.3节静态类型和表达力

1.3 静态类型和表达力 深入理解Scala 开发人员中有一个误解,认为静态类型必然导致冗长的代码.之所以如此是因为很多继承自C的语言强制要求程序员必须在代码中多处明确地指定类型.随着软件开发技术和编译器理论的发展,情况已经改变.Scala利用了其中一些技术进步来减少样板(boilerplate)代码,保持代码简洁. Scala做了以下几个简单的设计决策,以提高代码表达力. • 把类型标注(type annotation)换到变量右边. • 类型推断. • 可扩展的语法. • 用户自定义的隐式转

《深入理解Scala》——第1章,第1.5节总结

1.5 总结 深入理解Scala 本章中,你学到了一些Scala的设计理念.设计Scala的初衷在于把不同语言中的多种概念融合起来.Scala融合了函数式和面向对象编程,尽管显然Java也已经这么做了.Scala精选其语法,极大地减少了语言中的繁冗之处,使一些强大的特性可以优雅地表达,比如类型推断.最后,Scala和Java能够紧密集成,而且运行在Java虚拟机上,这或许是让Scala变成一种实用选择的最重要的一点.几乎不花代价就可以把Scala用于我们的日常工作中. 因为Scala融合了多种概

《深入理解Scala》——第1章,第1.1节Scala一种混合式编程语言

第1章 Scala--一种混合式编程语言 Scala是一种将其他编程语言中的多种技巧融合为一的语言.Scala尝试跨越多种不同类型的语言,给开发者提供面向对象编程.函数式编程.富有表达力的语法.静态强类型和丰富的泛型等特性,而且全部架设于Java虚拟机之上.因此开发者使用Scala时可以继续使用原本熟悉的某种编程特性,但要发挥Scala的强大能力则需要结合使用这些有时候相互抵触的概念和特性,建立一种平衡的和谐.Scala对开发者的真正解放之处在于让开发者可以随意使用最适合手头上的问题的编程范式.

《深入理解Scala》——第2章,第2.2节优先采用面向表达式编程

2.2 优先采用面向表达式编程 深入理解Scala 面向表达式编程是个术语,意思是在代码中使用表达式而不用语句.表达式和语句的区别是什么?语句是可以执行的东西,表达式是可以求值的东西.在实践中这有什么意义呢?表达式返回值,语句执行代码,但是不返回值.本节我们将学习面向表达式编程的全部知识,并理解它对简化程序有什么帮助.我们也会看一下对象的可变性,以及可变性与面向表达式编程的关系. 作者注:语句VS表达式 语句是可以执行的东西,表达式是可以求值的东西. 表达式是运算结果为一个值的代码块.Scala

《深入理解Scala》——第2章,第2.3节优先选择不变性

2.3 优先选择不变性 深入理解Scala 编程中的不变性指对象一旦创建后就不再改变状态.这是函数式编程的基石之一,也是JVM上的面向对象编程的推荐实践之一.Scala也不例外,在设计上优先选择不变性,在很多场景中把不变性作为默认设置.对此,你可能一下子会不适应.本节中,我们将学到不变性对于判等问题和并发编程能提供什么帮助. Scala里首先要明白的是不变对象和不变引用(immutable referene)的区别.Scala里的所有变量都是指向对象的引用.把变量声明为val意味着它是个不变"引

《深入理解Scala》——第2章,第2.4节用None不用null

2.4 用None不用null深入理解Scala Scala在标准库里提供了scala.Option类,鼓励大家在一般编程时尽量不要使用null.Option可以视作一个容器,里面要么有东西,要么什么都没有.Option通过两个子类来实现此含义:Some和None.Some表示容器里有且仅有一个东西,None表示空容器,有点类似List的Nil的含义. 在Java和其他允许null的语言里,null经常作为一个占位符用于返回值,表示非致命的错误,或者表示一个变量未被初始化.Scala里,你可以用

《深入理解Scala》——第2章,第2.5节多态场景下的判等

2.5 多态场景下的判等 深入理解Scala 众所周知,为多态的面向对象系统定义合适的判等和散列方法是个特别难的过程.这是因为子类可能在整个过程中造成一些相当怪异的问题,尤其是当类型层次上有多个实体(concrete)级别的时候.一般来说,对于需要比引用判等更强的判等(译者注:比如需要判断对象内部数据)的类,最好避免多层实体类层次.这是什么意思呢?有些时候类只需要引用判等就够了.也就是说只要两个对象不是同一个实例就判为不等.但是如果我们需要判断两个不同实例是否相等,而且又有多层实体类层次(mul