当前位置:Gxlcms > mysql > Fromawktopig–美丽说数据统计变迁

Fromawktopig–美丽说数据统计变迁

时间:2021-07-01 10:21:17 帮助过:36人阅读

第二十一期 《高性能数据库应用之“美丽说”技术专场 》 主题一:《From awk to pig 美丽说数据统计变迁》 简介: 1、美丽说简介。 2、数据统计问题描述。 3、数据统计的变迁。 a、石器时代 单机单进程(python+shell(sed, awk)) 。 b、青铜时代 单机单进程多

第二十一期 《高性能数据库应用之“美丽说”技术专场 》
主题一:《From awk to pig –美丽说数据统计变迁》
简介:
1、美丽说简介。 2、数据统计问题描述。 3、数据统计的变迁。 a、石器时代 –单机单进程(python+shell(sed, awk)) 。 b、青铜时代 –单机单进程多线程(mysql+python)。 c、农业时代 –单机多进程(hive+sqlite+python)。 d、工业时代 –多机多进程(hive+sqlite+python)。 e、信息时代 –hadoop集群(pig+python+java)。
嘉 宾:陈文江

人气教程排行