量化投资:实时数据源
实时交易数据源主要来自交易所,因为交易通道及法律法规方面的原因,本节仅介绍目前国内投资者容易参与投资交易的交易所以及常用的实时交易字段。
一、证券交易所
当前中国内地投资者比较容易参与交易的证券交易所主要有上海证券交易所、深圳证券交易所和香港联合交易所有限公司。
(一)上海证券交易所
上海证券交易所(以下简称“上交所”),创立于1990年,截至2013年初,共有954家上市公司,上市证券数达2214只,总市值超16万亿元人民币,累计为国民经济支柱企业、重点企业、基础行业企业和高新科技企业筹资达25万亿元人民币,并协助这些企业完成了经营机制的转换。
随着资本市场的变化,上交所的工作重点转移至创新层面,不断加强业务创新、产品创新和技术创新,拓展市场深度和广度,完善市场内在功能。
1.业务创新
上交所及时跟进市场动态,在交易服务创新方面推出了融资融券、“上证基金通”、双边报价、固定收益证券综合电子平台、大宗交易平台等创新业务。
2.产品创新
成为一个集筹资、投资、资产管理于一身的“金融产品超市”,形成“差异化、多元化、国际化”三化合一的证券交易所是上交所的目标。综合市场需要和市场环境,现已完善以股票、基金、债券、ETF、权证五类产品为基础的产品创新流程。未来计划推出沪深300等指数ETF产品及黄金ETF等世界主流创新产品,并密切关注衍生类投资品种和其他结构化产品的研究。
3.技术创新
上交所在技术创新领域领先表现在现金系统的使用方面。上交所采用了自动撮合系统实现无纸化交易、新一代交易系统改善了核心交易系统的安全性和可靠性、第三代监察系统增强了监管优势、覆盖全国的通信系统支撑泛证券领域的交易服务。
(二)深圳证券交易所
深圳证券交易所(以下简称“深交所”)位于深圳市经济金融中心,成立略晚于上交所。作为实行自律管理的法人,由中国证监会直接监督管理,服务内容包括为证券集中交易提供场所和设施,组织和监督证券交易。深交所高度重视创新工作,通过持续创新不断完善多层次资本市场服务实体经济的能力。
1.业务创新
深交所近年来推出的业务创新项目有融资融券及转融通证券岀借业务、约定式证券购
2.产品创新
深交所的主要产品有股票、基金、债券、权证和ETF五大类。深交所股票产品的数量占国内资本市场的60%左右;深交所已形成包括ETF、LoF、封闭式基金、分级基金在内,覆盖境内外多个市场的完整上市基金产品线;深交所债券市场近年来发展较快,公司债、定向债等2014年已经成为上市公司融资的重要渠道,2011年还推出了服务未上市公司的中小企业私募债产品;深交所已经开展企业资产证券化业务试点,正在积极研究推出房地产投资基金(REITs)、股票期权等创新产品。
3.技术创新
深交所始终坚持“安全高效,自主可控”的技术创新原则,在国内率先实现无形化与无纸化交易,逐步构建了以交易系统为核心、以监察系统和中心数据库系统以及业务管理系统为主要业务支撑,较为完善的技术支持体系,迄今已经保持了14年的安全运行纪录,技术水平居于国际先进水平。
(三)香港联合交易所有限公司
香港交易所是带领香港金融服务业突破地域界限的主力之一,促进香港地区成为世界金融中重要的一员,旗下子公司包括香港联合交易所有限公司、香港期货交易所有限公司及香港中央结算有限公司。随着股份化改革和与结算公司合并,于2000年6月香港交易所上市,并以市场为根本,对各业务主导的市场进行管理和开发。
香港交易所由其管理层和董事局成员直接管理,商业营运架构和业务部门划分为香港交易所提供更优质的交易一站式服务奠定了公司基础,增值服务对象包括投资者、市场中介人士及上市公司。
二、期货交易所
期货可分为商品期货、金融期货、利率期货、外汇期货和贵金属期货等。目前,我国拥有三个商品期货交易所和一个金融期货交易所,分别是上海期货交易所、大连商品交易所、郑州商品交易所和中国金融期货交易所。
(一)上海期货交易所
上海期货交易所(ShanghaiFuturesExchange,SHFE)受中国证监会集中统一监督管理,从性质上划分是独立实行自律性管理的法人。上海期货交易所现有期货经纪公司会员超160家,占总会员80%以上,交易品种涵盖铜、铝、锌、天然橡胶、燃油、黄金、螺纹钢、线材等10种期货合约。
(二)大连商品交易所
大连商品交易所(DalianC。mm。dityExchange,DCE)是我国最大的农产品期货交易所,主要交易品种有大豆、豆粕、豆油、线型低密度聚乙烯、棕桐油以及玉米等9个期货品种。
(三)郑州商品交易所
郑州商品交易所(以下简称郑商所)是我国首家期货市场试点单位,隶属于并直接受中国证监会垂直管理。上市交易品种包括硬麦、强麦、棉花、白糖、精对苯二甲酸、菜籽油、早粧稻等期货品种。
三、交易及行情数据技术
(一)交易及行情数据技术发展沿革
1.国际通用交易及行情数据技术发展沿革
最早的交易行情数据技术可追溯到1993年建立的金融信息交换协议(FinancialInf。rmati。nexchange,FIX),该协议实现了证券市场参与主体间信息实时交换,适用于实时证券金融电子交易开发的数据通信标准,目标是把各类证券金融业务需求流程格式化,使之成为一个可用计算机语言描述的功能流程,并在每个业务功能接口上统一交换格式,方便各个功能模块的连接。随着业务的发展及加入该组织机构的增多,FIX的内容不断得到扩充,出现了多个FIX协议版本。如1995年1月,FIX2.7发布;1995年9月,FIX3.0发布;1997年1月,FIX4.0发布;1998年4月,FIX4.1发布;1999年9月,FIX4.2初稿发布;2000年1月,FIX4.2发布;2001年6月,FIX4.3发布。
随后,针对FIX协议存在的冗余度高、带宽需求大等问题,芝加哥商品交易所于2003年11月17日向FIX协议组织(FIXPr。t。c。lLimited,FPL)提交了一个隐示标记(ImplicitTags)方案。并于2006年初完成了FAST(FixAdaptedf。rStreaming)V1.0,2006年12月完成了FASTVl.l。FAST是一种面向消息数据流的二进制编码方法。现在FAST协议已经被国际上多家大型交易所接受并开始采用,芝加哥商品交易所(CME)于2007年11月推出FIX/FAST市场数据模式。美国国际证券交易所2007年10月10日宣布采用FIX/FAST协议进行传输。
2.中国交易及行情数据技术介绍
国内业内常见实时交易数据分为Level-1和Level-2两种。Level-1对应的技术标准是Sh。w2003(本来不存在Level-1这一说法的,但是因为后期交易所推岀了Level-2的技术接口,所以为了对应称呼比较方便,将Show2003技术协议称为Level-1)。Sh。w2003以dbf文件交换方式实现,每6秒发布一次快照,包括5档价格。
Level-2行情具有良好的灵活性和扩展性,克服了Sh。w2003数据接口单一、扩展困难的不足,也使得经营商无须频繁进行技术升级以适应证券业务的发展,单页存在数据冗杂的缺点,且Level-2产品具有数据重发保障机制,提供数据重发功能,克服了Sh。w2003补发数据方面的困难。国内目前有两个FIX标准的应用,一个是在FIX基础上提出的有国内证券特殊内容的STEP协议,另一个是FAST协议。两者分别是深交所和上交所使用的Level-2行情的接入协议。
STEP协议(SecuritiesTradingExchangePr。t。c。l)是我国证券交易所于2006年7月基于FIX协议建立的新一代“证券交易数据交换协议”,该协议不仅将目前证券市场上使用的操作指令和通知用标准的格式描述出来,而且完全与国际流行的FIX兼容。STEP协议发布的Level-2行情系统与传统Level-1行情相比,速度提升3~6秒以上,且提供委托队列、逐笔成交、委托买卖等综合性信息,更可以简单、直观地告诉投资者,在看似复杂的成交背后隐藏的市场信息。
而FAST协议择时引进国际上先进的技术,该协议克服了FIX协议传输市场数据冗余度高、带宽需求大的问题,釆用二进制数据流交换方式,将STEP协议的28ms行情延迟提高到20ms行情延迟,此外,通过对比测试结果显示,FAST版本的带宽占用率平均为STEP版本的24.2%,
(二)Level-1数据内容
Level-1的数据主要包括基本行情部分(评级、买入价、每笔手数、成交价、卖出价等)以及扩展行情(卖价1~卖价5,买价1~买价5,以及相对应的卖量1~卖量5,买量1~买量5,动量、流通市值等)。具体的数据及其解释见附表75至附表76。
(三)Level-2数据内容
相对于Level-1的数据,Level-2的数据包含了更多的信息。如在扩展行情部分,包含了机构买单吃货数、机构卖单吃货数、1分钟涨速、买入单数、卖出单数、中单买入、大单买入、特大买入、中单卖出、大单卖出、特大卖出等信息。具体的数据及其解释见附表77至附表79。
一般实时数据的发布流程分有以下几个环节:交易时间一交易所发布数据时间一数据到达数据提供商时间一数据提供商发布数据时间。量化投资者,特别是超高频投资策略或市场微观结构等投资者对实时数据的反应时间有很强的硬性要求,一般要求各反应时间之和不超过60ms,遗憾的是,目前大多数数据提供商均无法达到这一要求。