神马搜索大数据基础架构黄锐华/阿里巴巴(神马搜索)关于神马搜索平台发展3个阶段
阶段1,满足大规模数据存储和(时效性)计算。业务代表:抓取、索引、排序
阶段2,满足复杂的数据挖掘和处理需求。业务代表:日志挖掘、数据融合、推荐模型
阶段3,功能和平台的标准化 代表:通用算法、通用调度、流程语言
大数据平台整体架构一些心得
关注业务,更要关注人-大家解决问题的方式往往能给人以启发
不要轻信直觉,预留位置,不放PPT内容
不要迷信开源
多平台是不得已的选择
服务一线员工,而非取悦bos
建平台容易,推广难
积累你的口碑