搜索是各类网站和数据类APP的标配功能。目前开发者一般基于开源搜索系统，例如ElasticSearch、Solr、Sphinx等自己搭建搜索服务，系统定制、开发和维护成本都非常高。云搜索是一种结构化数据搜索托管服务，开发者将数据上传至云端，云端进行数据处理和索引构建，开发者再通过API使用云端搜索服务。云搜索极大降低了搜索服务使用门槛，也极大降低开发运维成本。开放搜索服务OpenSearch是阿里巴巴研发的一款云搜索服务，允许开发者对索引结构、数据处理、搜索相关性等做深度定制。OpenSearch底层存储基于HBase，搜索服务基于阿里巴巴自主研发的分布式实时搜索引擎平台ISearch5，该平台提供灵活的相关性计算框架，自动容错，自动伸缩和统一的业务服务层，是阿里巴巴商品搜索和全网搜索的坚强后盾，承载了阿里全集团，包括淘宝、天猫、一淘、神马搜索等主要搜索业务流量，搜索请求峰值数十万QPS。iSearch5经历了iSearch1、iSearch3.0、iSearch4.0、Kingso和问天3等多个时代，是一个从系统到平台的自然演化过程。...

Gearpump是一个基于Akka Actor的轻量级的实时流计算引擎。今天的流平台需要能处理来自各种移动端和物联网设备的海量数据，系统要能不间断的提供服务，对数据的处理要能做到不丢失不重复，对各种软硬件错误能平滑处理，对用户的输入要能实时响应。除了这些系统层面的需求外，用户层面的接口还要能做到丰富而灵活，一方面，平台要提供足够丰富的基础设施，能最简化应用程序的编写；另一方面，这个平台应提供具有表现力的编程API，让用户能灵活表达各种计算，并且整个系统可以定制，允许用户选择调度策略和部署环境，允许用户在不同的指标间做折中取舍，满足特定的需求。Akka Actor提供了通信、并发、隔离、容错的基础设施， Gearpump通过把抽象层次提升到Actor这一层，屏蔽了底层的细节，专注于流处理需求的本身，能更简单而又高效的解决上述问题，它的功能亮点包括：

1）实时Exactly once 的消息处理。

2）毫秒级延时。

3）高性能，每秒能处理百万甚至千万条消息。

4）基于Gossip的HA设计，无中心节点，没有单点失效。...

推荐系统中最核心的数据之一是 user profile 数据。我们需要从大量历史用户行为中分析和挖掘各种维度的特征，来刻画用户的兴趣偏好。这个分享中会介绍今日头条 user profile 系统的现状，面临的问题，系统演进，以及技术架构中的关键问题：

1. 如何结合 batch 计算与 streaming 计算模型，实现 user profile 的分钟级更新；

2. 如何设计 user profile 的在线存储系统，支持高吞吐、低延迟的更新和访问；

3. 如何存储海量的用户行为数据并支持不同的应用场景和访问模式。

听众受益：

1. 了解大规模推荐系统中 user profile 面临的挑战和问题，以及我们的解决思路；

2. 了解 user profile 系统设计中对存储、计算、队列等基础设施的需求，问题和方案，以及生产环境中的最佳实践。