杉岩数据在证券:3大场景、国内TOP10券商对象存储实践
最近几年来,证券行业加快了数字化转型的进程作为数字化转型的基石,传统IT基础设施向软件定义的分布式架构演进已成为大势所趋,与此同时,越来越多的证券公司以新创转型为契机,推进从底层架构,管理体系,业务系统到核心系统的全面重构
凭借在大数据智能存储领域领先的技术积累和产品实力,目前杉岩数据存储产品和解决方案已经在海通证券,广发证券,东方证券等多家证券行业龙头企业进行了商用部署,并得到了众多老客户的持续回购在恶劣的生产环境下,杉岩数据产品的性能,可用性和稳定性都非常优秀,在影像系统,非结构化数据统一管理,私有云等多个场景下积累了大量的实际案例
一,图像系统场景
镜像系统是证券行业IT信息系统的重要组成部分,为双录系统,开户系统,券商柜台交易系统,投行及研究所,事后监管等系统提供平台支持伴随着移动和互联网前端业务的开展,各种证券业务会产生大量的音视频,凭证,票据,扫描合同等视频文件总存储容量达到PB级别,数量达到数亿甚至数十亿,文件类型多样,其中以KB文件为主由于法规要求,这些影像文件的保存期限通常在20年以上,具有数据量大,类型多,保存期限长的特点
在证券交易过程中,需要对图像数据进行高效的检索传统NAS/SAN存储系统在上亿图像和小文件的场景下,往往面临性能下降,检索效率低,可扩展性和容量有限,数据迁移困难等问题,直接影响业务访问效率和上层业务体验
山彦海量对象存储基于通用服务器硬件分布式架构和扁平化数据管理模式,可支持证券行业数千亿小文件和超大容量空间的数据存储需求,实现在线横向和纵向双向按需扩展,保证稳定的读写性能此外,针对影像系统的场景,山彦海量对象存储支持数据生命周期管理,可视化管理,智能运维,全面数据保护机制,成为越来越多证券公司历史影像数据归档平台的选择
作为证券影像系统的底层存储系统,山大数据领先的分布式对象存储架构已服务于海通证券,东方证券,郭进证券,民生证券,第一创业证券等众多行业的头部客户,构建了高可靠,高性能,统一灵活的存储资源池,为影像业务提供存储服务支持,助力IT基础设施的平稳转型。
客户实践
s证券携手杉岩数据,推动底层存储创新实践。
s证券是双A级券商,连续多年位居国内证券行业前10名S证券作为新创工程试点单位,积极响应国家号召,决定从底层架构切入,逐步实现软硬件国产化
经过严格的测试和多方面的综合评估,S证券最终采用杉岩海量对象存储产品作为影像数据管理系统的存储基础s证券利用杉岩海量对象存储,构建了高性能,高可靠,高扩展,高可用的对象存储资源池,可满足近20亿影像数据的存储,备份和归档需求,包括资金开户,录音录像,身份证明,支票和合同协议,并保证毫秒级访问目前S证券对象的存储规模已经超过60个节点,存储容量近5PB预计未来3—5年,S证券部署节点将达到数百个,数据规模将达到近10PB
S证券作为新创项目,基于杉岩海量对象存储产品,实现了同一个存储资源池兼容不同架构,不同整机的异构硬件平台,集中统一管理,支持国产操作系统目前,S证券已将双录系统,开户系统,柜台交易系统,投行研究与投资等多个系统过渡到国内平台,兼容性好,运行稳定,充分考验了在便携性,兼容性,功能性,可靠性等方面的优异性能在一池多核的情况下,海量对象存储在山彦
伴随着新创实践的深入和信心的增强,S证券计划在未来几年内将更多的业务系统迁移到新创生态。
二,非结构化数据统一管理场景
在证券行业,图像系统,客户中心,文件系统,办公网盘系统,日志系统,备份系统等会产生海量的非结构化数据,每年新增几千万甚至上亿的文件而且数据分散在各个业务系统和不同的存储设备中,无法有效归档
面对海量的非结构化数据,传统NAS存储可能需要几个月的时间来更新硬件和迁移数据,成本高,耗时长,风险大,对IT运维提出了极大的挑战。
岩体对象存储支持原始NAS存储的快速管理通过管理原始NAS的元数据,并将其转换为对象存储中的对象属性信息,统一了命名空间管理完成后,前端业务可以同时访问对象存储和NAS中的原始数据,无需大量数据迁移,免去了数据迁移和验证的繁琐过程,大大缩短了业务上线时间此外,为了帮助金融客户更好地实现AI赋能和价值挖掘,杉岩的海量对象存储产品可以与智能数据处理平台相结合,支持自动数据压缩/格式转换,OCR识别等,从而提高数据使用效率,充分释放数据价值
目前,山彦海量对象存储产品已支持广发证券,平安证券,国泰君安证券,第一创业证券等多家证券行业客户的非结构化数据统一管理场景和业务。
客户实践
g证券携手杉岩数据,实现从NAS到对象存储的数据集中管理。
g证券是全国首批综合类证券公司,主要业务指标连续多年位居全国证券公司前十名面对互联网金融新的竞争环境和挑战,G证券积极运用金融科技赋能业务发展,客户服务和内部管理,不断升级IT基础设施
2017年,G证券开始用杉岩海量对象存储产品替换原来的NAS存储,最初只用于存档系统经过严格的生产环境运行测试,2019年,G证券决定将投行系统,挂载系统,柜台系统,视频开户系统等多个核心重要业务系统的数据直接存储或存档到山彦的海量对象存储中截至目前,G证券四次扩容,部署20多个节点,存储容量近4PB,实现了海量非结构化数据的统一存储,统一管理和价值利用,消除了信息孤岛
杉山数据的产品具有强大的存储和检索海量小文件的能力目前帮助我们存储了近十亿个文件,性能非常稳定数据集中存储大大提高了数据安全管理水平,极大地方便了文件的检索和利用此外,杉山数据的快速服务响应也让我们很放心G证券档案中心负责人表示
第三,私有云场景
伴随着基于互联网的证券业务的发展,大规模的应用部署在容器平台上当启动数百个pod时,挂载操作对存储性能要求更高,甚至会出现挂载失败的情况与文件存储相比,对象存储将文件管理规模提升了100多倍,在新技术的支持上也有优势,比如容器支持场景,使用对象存储,POD启动不需要挂载存储只有业务访问文件时,才会与存储连接,所以POD中的批量创建/启动变得轻松舒适,为大数据的海量智能存储提供了坚实的基础
此外,在私有云场景下,虚拟化,数据库,开发和测试云,容器和微服务,网盘,备份和归档等需要实现敏捷开发,应用交付,灵活性,高可用性,异常迁移,监控和报警等能力统一存储平台可以提供不同的存储接口,以适应各种私有云平台,如基于KVM虚拟化的OpenStack平台或K8S容器平台
目前,杉岩数据已经帮助平安证券,深圳证券信息等多家客户快速搭建了兼容所有主流虚拟化平台和容器微服务平台的统一存储资源池,为大规模云环境提供可靠的存储基础架构支持。
客户实践
知名券商携手杉山数据,一套存储支持上百个容器平台。
y证券是国内知名的证券公司基于山彦统一存储平台,Y证券构建了近300TB的存储资源池,同时提供块,文件,对象服务,分别对接虚拟化平台和容器平台,为数百个容器提供稳定支持在项目交付阶段,集装箱平台对接时间仅为几分钟,大大缩短了业务上线时间基于CSI的动态管理显著提高了资源利用率,节省了40%以上的硬件成本和运维成本
助力证券行业数字化转型,杉山数据将继续进化。
面对证券行业客户在存储基础架构可靠性,可扩展性,异构利用率,成本投入,数据迁移等方面的挑战,杉岩数据提供了千亿文件/EB存储容量,照顾老,数据全生命周期自动管理,智能数据处理等特性通过行业领先的对象存储,统一存储和新创存储产品和解决方案支持跨区域数据中心主备,安全可靠的主备和多站点容灾部署等,全面融入国内软硬件生态,多层次实现新创的技术栈,帮助用户构建线性扩展,超大容量,安全可靠的跨区域存储架构,以支撑证券行业稳定敏感的业务应用
未来,杉山数据将持续演进,帮助证券行业用户更好地掌控海量非结构化数据,进一步凸显数据价值,助力推动IT基础设施升级和创新转型。
声明:本网转发此文章,旨在为读者提供更多信息资讯,所涉内容不构成投资、消费建议。文章事实如有疑问,请与有关方核实,文章观点非本网观点,仅供读者参考。