[00275266]一种由转换原语生成Spark代码的方法
交易价格:
面议
所属行业:
分析仪器
类型:
发明专利
技术成熟度:
正在研发
专利所属地:中国
专利号:CN201611252903.4
交易方式:
技术转让
技术转让
技术入股
联系人:
南京大学
进入空间
所在地:江苏南京市
- 服务承诺
- 产权明晰
-
资料保密
对所交付的所有资料进行保密
- 如实描述
技术详细介绍
本发明公开了一种由转换原语生成Spark代码的方法,包括步骤步骤10设计表示数据模型变换的转换原语语法;步骤11输入一个数据模型变换的原语文件,作为代码转换器的输入文件;步骤12利用Xtext实现代码生成器的文法构造,完成转换原语的语法解析;步骤13利用Xtend实现代码生成器的转换规则,建立转换原语与Spark代码之间的映射;步骤14将模型变换的原语文件输入代码生成器;步骤15得到输入、输出数据类和转换规则的Spark代码;本发明将一组描述数据转换的转换原语生成具有相同转换操作的Spark代码,降低数据平台开发人员使用Spark平台的复杂性,简化数据转换过程,降低基于Spark平台的大数据转换实现成本。
本发明公开了一种由转换原语生成Spark代码的方法,包括步骤步骤10设计表示数据模型变换的转换原语语法;步骤11输入一个数据模型变换的原语文件,作为代码转换器的输入文件;步骤12利用Xtext实现代码生成器的文法构造,完成转换原语的语法解析;步骤13利用Xtend实现代码生成器的转换规则,建立转换原语与Spark代码之间的映射;步骤14将模型变换的原语文件输入代码生成器;步骤15得到输入、输出数据类和转换规则的Spark代码;本发明将一组描述数据转换的转换原语生成具有相同转换操作的Spark代码,降低数据平台开发人员使用Spark平台的复杂性,简化数据转换过程,降低基于Spark平台的大数据转换实现成本。