[00230666]一种基于多阶段特征的MapReduce作业细粒度分类方法
交易价格:
面议
所属行业:
分析仪器
类型:
发明专利
技术成熟度:
正在研发
专利所属地:中国
专利号:CN201410836410.X
交易方式:
技术转让
技术转让
技术入股
联系人:
中国科学院深圳先进技术研究院
进入空间
所在地:广东深圳市
- 服务承诺
- 产权明晰
-
资料保密
对所交付的所有资料进行保密
- 如实描述
技术详细介绍
本发明提供的基于多阶段特征的MapReduce作业细粒度分类方法,通过单独对每个阶段的特征进行分类,可以得到每个作业在不同阶段的相似性作业,这些相似性的作业在该阶段可以进行相似性地优化,进而可以实施MapReduce阶段级地快速优化,使得优化的目的更明确,提高了优化的效率,同时也有利于利用分类的结果进行MapReduce工作流的细粒度瓶颈分析,找出制约程序运行性能地瓶颈可以更有针对性地改善程序的设计,提高程序本身的性能。
本发明提供的基于多阶段特征的MapReduce作业细粒度分类方法,通过单独对每个阶段的特征进行分类,可以得到每个作业在不同阶段的相似性作业,这些相似性的作业在该阶段可以进行相似性地优化,进而可以实施MapReduce阶段级地快速优化,使得优化的目的更明确,提高了优化的效率,同时也有利于利用分类的结果进行MapReduce工作流的细粒度瓶颈分析,找出制约程序运行性能地瓶颈可以更有针对性地改善程序的设计,提高程序本身的性能。