中交兴路系统架构师杨晓明:Hadoop+Storm+ HBase…,打造交通行业创新型服务
来源:程序员人生 发布时间:2014-09-24 18:10:36 阅读次数:2763次
【智能交通软件开发商/集成商大列兵】系列专访活动正在进行中,广邀国内智能交通领域企业展示企业文化、产品风采,分享研发成功经验,为更多同领域企业启明导航。
如果您、所在公司正专注于智能交通领域的技术研发,如果您希望报道您的公司或技术负责人,或发表您的独特观点与见解,或吐槽行业技术产品现状与困难,欢迎联系:陈秋歌(chenqg@csdn.net)、
付江( fujiang6170@gmail .com,微信Jack_JiangNB)。
欢迎智能交通软件开发商/集成商、企业技术领袖、技术开发者加入“智能交通开发商” QQ群 :334121236,沟通交流。
出租车、公交车、客运班车、重型货车……,营运车辆在城市交通中占据着重要的地位,与人们生活乃至社会发展有着重要关系。构建信息化平台,对营运车辆进行监控与管理,规范车辆行为,建立良好营运秩序,已成为智能交通建设中不可或取的一部分。
“交通部全国货运监管服务平台”是北京中交兴路信息科技有限公司(以下简称”中交兴路“)所开发的重要产品之一,致力于对全国货运车辆进行监控、管理及信息交互,在充分运营的情况下,每秒将产生数十万的平均访问量乃至每日上百TB的数据。正是凭借常年在交通领域内的专注与行业知识的积累,及持续接纳新兴技术的勇气,该公司在业内已产生了自己独有的竞争力。近日,CSDN有幸采访了中交兴路系统架构师杨晓明,请他分享中交兴路对云计算、大数据等新技术的探索与尝试,及相关项目研发经验。
中交兴路系统架构师 杨晓明
CSDN:请简单介绍一下您的从业经历,重点参与的项目或产品有哪些?
杨晓明:我2003年开始全职从事软件研发工作,2007年后一直担任架构师的工作。曾参与民航航空安全管理信息系统、民航总局运行管理中心、中国空中交通流量预测系统、交通部全国货运监管服务平台、雅迅车联网系统、浪淘金全媒体推荐引擎、位客网、分分网、简单网等包括政府平台、SNS系统及电子商务平台的开发和架构工作。
CSDN:您主要关注哪些技术领域?
杨晓明:长期关注新兴技术,现阶段主要研究可应用于交通领域的高并发、大数据及数据挖掘相关技术。
致力于交通信息化 以营运车辆监控与管理为业务主旨
CSDN:请介绍一下贵公司所专注的领域,相对于业内同类公司,贵公司的核心竞争力是什么?
杨晓明:我们公司(北京中交兴路信息科技有限公司)一直致力于交通信息化领域的技术研发、解决方案提供。公司的核心竞争力在于常年在交通领域内的专注与行业知识的积累,以及持续接纳新兴技术的勇气。同时,作为交通部智能交通行业研发中心,政府的支持和一些国际一流IT公司的帮助也使我们公司在业内更加具有竞争力。
CSDN:请列举贵公司的1至2拳头产品。该产品在产品设计、技术实现上有哪些创新之处?
杨晓明:我们公司目前最重要的产品是交通部全国货运监管服务平台,这是国务院文件规定的全国性公共平台,是准公益性平台。该平台的目标是实现全国货运车辆的数据汇总、信息交互。由于该平台在充分运营后,将会有每秒数十万的平均访问量和每日上百TB的数据,因此在技术实现方面会有很大的挑战性。为了实现这样的任务目标,我们现在是采用业界主流的大数据技术进行设计开发的,下一步我们将会把互联网界成熟的高并发、大数据量技术在我们的平台中进行更为深入的运用。
依托大数据、开源等技术,更多产品设想走进现实
CSDN:贵公司的研发团队组织架构及分工是如何的?对研发投入主要集中在哪些方面?能不能谈些具体的做法。
杨晓明:我们公司研发团队设立于公司CTO领导的研发中心内。包括技术研发部、技术管理部和测试部三个部门。研发的投入包括正常的员工薪酬、硬件采购、职业技术培训等方面。
CSDN:如何看待以云计算、大数据及移动为代表的新技术给该领域带来的冲击,贵公司在产品(技术)上如何与之结合?
杨晓明:多年前,我们从事交通数据相关技术工作的同仁们,一直为数据源长期处于移动状态,并持续产生大量数据的问题的解决方案而煞费苦心。如今云计算、大数据与移动互联网技术为我们处理之前的难题提供了可行、可靠、成本相对低廉的实施手段。目前我们公司通过使用Hadoop、HBase、Lucene、Redis、Storm等技术已经解决了在处理海量车辆报文数据方面之前采用传统数据库技术很难解决的问题,通过这些新技术的使用,我们可以提供很多交通行业的新型服务,而这些服务在前些年都只能存在于产品经理的想象之中。
CSDN:贵公司在产品研发过程中,都使用了哪些第三方服务、技术?
杨晓明:除了上一问题中提到的技术,我们还运用了大量的开源技术,如Linux、Java、M