第002期文化大数据政策及新闻简报
点击上方蓝字关注我们
上海数据交易所年度发布会上,《2023年中国数据交易市场研究分析报告》发布
报告显示,2021-2022年中国数据交易行业市场规模由617.6亿元增长至876.8亿元,年增长率约为42.0%。预测至2030年中国数据行业市场规模有望达到5155.9亿元。
由于各国数字化进程不断加速,数据成为新的生产要素,数据交易规模也不断增长。2022年全球数据交易规模在约906.0亿美元,预测至2025年市场规模有望增长到1445.0亿美元,到2030年全球数据交易市场规模有望达到3011.0亿美元。
数据资源是数字中国建设的核心要素。中国数据交易市场数据产品的三种分类为数据集、数据服务、数据应用,场外数据交易还包括数据算力服务等。2022年,中国大数据产业规模达1.57万亿元,数据要素正成为劳动力、土地、资本、技术之外最先进、最活跃的新生产要素。2022年中国数据交易行业市场规模为876.8亿元人民币,占全球数据市场交易规模的13.4%,占亚洲数据市场交易规模的66.5%。
长三角占比近30%
从中国各地区数据交易市场规模来看,占比较大的是华东和华南地区,其次是西南地区,该数值和各地区数字经济的发展直接相关。
整体来看华东、华南和西南地区数据交易市场发展较好的原因在于,首先华东、华南地区的金融市场发展较好。由于数据需求方主要集中在金融行业中,例如券商、保险公司、银行等,华东地区的金融行业发展较为集中,因此数据交易行业发展较好。其次,华东、华南地区的互联网行业发展也较好。
从城市来看,中国经济区中数据交易市场规模主要集中在长江经济带,特别是包括上海、安徽、浙江、江苏的长三角地区,占全国数据交易市场的比例为27.7%;其次粤港澳地区的数据交易市场发展也较为强势,占比为14.4%;川渝地区的占比为7.2%。发展较好的前十个省市为广东、北京、上海、浙江、江苏、福建、山东、四川、湖北和河南。
报告认为,各地区都在积极探索和推进数据交易市场的发展。一些地区采取了建立公共数据平台的方式,推动政府数据开放共享;一些地区则通过建立数据交易中心或数据交易平台等方式,为企业提供数据交易服务。在发展过程中,各地区也面临着一些挑战和问题,如数据质量不高、数据安全保障不足、缺乏统一的数据交易规则和标准等。为了解决这些问题,各地区需要进一步加强政策支持、技术研发和人才培养等方面的工作,推动数据交易市场的健康发展。同时,随着数字经济的不断发展,数据交易市场也将迎来更多机遇和挑战。各地区需要密切关注市场变化和政策动向,加强合作和交流,共同推动全国数据交易市场的繁荣发展。
金融、互联网、通信领域为前三
而在行业方面,中国数据资源应用场景丰富,金融、互联网、通信、制造工业、政务、医疗健康、交通运输和教育等细分行业对于数据产品的应用需求均呈现出上升趋势,且未来交易规模有望进一步提升。
2022年,中国数据交易规模达到876.8亿元人民币。其中,根据数据应用领域来分,金融行业的数据交易规模约为306.9亿元,占比达到35.0%,是目前最大的细分行业数据交易市场。
其次,互联网行业数据交易规模达到210.4亿元人民币,占比约为24.0%;通信行业数据交易规模达到78.9亿元人民币,占比约9.0%;制造工业、政务及医疗健康行业数据交易情况相当,分别以约61.4亿元、61.4亿元和52.6亿元的交易规模各占据整体市场的6.0%-7.0%;另有约8.0%的数据交易市场规模被其他行业所占据,例如文旅、农业等。未来,随着数据确权、数据分级分类和数据资产入表等相关利好政策的推动,各类数据产品在各行各业领域内的应用价值有望被持续开发,交易规模将持续提升。
报告认为,随着数据要素地位的确立,中国数据交易市场规模也呈现快速增长趋势。数据交易既可通过依法设立的数据交易平台进行(场内交易),也可由交易双方依法自行交易(场外交易)。
(摘自新浪新闻)
版博会丨15家深圳知识产权代表企业和协会亮相版博会
由国家版权局主办,四川省版权局、成都市人民政府承办的第九届中国国际版权博览会(以下简称“版博会”)于11月23日至25日在四川省成都市举办。
在深圳市市场监督管理局(深圳市知识产权局)牵头组织下打造了深圳城市馆,深圳市版权协会协助邀请组织15家深圳知识产权代表企业参展。
深圳城市馆通过静态实物展示、动态视频展播及现场互动相结合的方式,为观众打造沉浸式参观体验,展现深圳版权成果,讲好深圳版权故事,为第九届中国国际版权博览会增光添彩,为版权强国建设贡献力量。
围绕第九届中国国际版权博览会主题,突出深圳版权特色,深圳城市馆分为“版权示范展示区”“版权创意展示区”“版权服务展示区”3个区域。
走进“版权示范展示区”,只见展示区内主要展示全国版权示范单位、广东省版权兴业示范基地的版权成果。参展的有雅昌文化(集团)有限公司、深圳广播电影电视集团、腾讯研究院、深圳市斯达高瓷艺有限公司、深圳市环球数码影视文化有限公司等。
在“版权服务展示区”,主要展示版权数字化服务成果,包含版权区块链服务网络和公共服务平台、知识产权资产管理平台、原创作品数字备案平台、侵权线索监测平台、侵权证据固化平台、版权资产交易平台等。有深圳市前海智慧版权创新发展研究院、深圳文化产权交易所、深圳市版权协会、深圳市求实知识产权服务有限公司参展。
“版权创意展示区”主要展示影视动漫、文具办公用品、文创潮玩、IP孵化、元宇宙展厅编辑、街舞等不同业态“版权+产业”的市场化运用成果及授权模式。
参展的企业有深圳天天成长影视有限公司、深圳齐心集团股份有限公司、深圳市寻麟文化有限公司、深圳市鼎成品牌顾问有限公司、深圳市积木数字版权研究中心有限公司、深圳市龙岗区时代街舞艺术团等。
(摘自“深圳市版权协会”公众号)
以数字技术为主导的新技术正加速改变文化产业生态模式。11月28日至29日,2023粤港澳大湾区文化产业投资大会(下称“大会”)在广州举行。本次大会以高标准打造新型文化投融资平台为目标,着眼于金融助力文化产业高质量发展,聚焦生成式元宇宙、数字创意、人工智能三大文化产业发展的前沿领域。
广东是文化大省,也是金融大省。会上,多位受访人士向南方财经全媒体记者表示,金融作为支持文化产业生态的重要一环,“文化+金融”的合作模式将产生裂变效应,破解产业发展难题。近年来,广东在政策支持、服务支撑等多个方面积极探索发力,发挥了金融作为产业“催化剂”的重要作用,期待此次大会的举行进一步加速文化和金融的融合,开辟“文化+金融”高速通道。
金融支持文化产业模式亟待转变
产业是经济的筋骨,金融是产业的血脉。近年来,我国文化金融发展取得了巨大进步,为我国文化发展和文化强国建设作出了积极贡献。
日前,由国家金融与发展实验室等单位编撰发布的《中国文化金融发展报告(2023)》(下称《报告》)指出,近十年来,我国文化金融市场高速增长并极大地推动了文化产业发展。在银行信贷、债券、上市公司融资、私募股权基金市场等各个方面,市场规模都在这十年间实现了飞跃。文化产业贷款余额已经接近万亿元,债券发行规模超过400亿元,上市公司融资和私募股权融资均一度超过千亿元规模。其中,以银行为主体等间接融资体系是文化产业金融支持体系中规模最大、最为成熟稳定的部分。
值得注意的是,《报告》亦指出,从长期看,随着数字文化经济政策的深入实施,以及资本市场改革的推进等,数字文化产业成为文化产业投融资的主要领域将成为必然趋势。
有业内人士认为,以数字技术为主导的新技术不仅改变了传统的文化产品和服务模式,更改变了文化产业生态模式。金融支持体系作为产业生态重要的一环需要进行相应调整,传统的文化产业金融支持模式无法应对不断涌现和升级换代的文化科技产生的颠覆性效应,亟待在金融支持模式上有所创新,文化和金融的融合也需加深。
北京大学艺术学院教授、北京大学文化产业研究院院长向勇在接受南方财经全媒体记者采访时表示,相较于传统文化产业,以数字技术为代表的新兴文化产业在产品模式、产业链构建、风险控制等方面呈现出不同的特点,因此新兴文化产业的投资逻辑亦有所不同。
向勇表示,传统的文化产业大致可以分成两类型,一类属于资源密集型,例如旅游业等往往与“不可移动”的资源相关的产业。在投资这类产业时,资本更多流向于物理设施的建设、固定资产投资;另一类是劳动密集型,例如表演艺术业。这类产业从研发、创作再到表演都与演职人员的劳动投入密切相关,往往存在不确定因素,投资风险较大。
“以数字技术为代表的新兴文化产业在产品规模化、产业链的拉长性,与传统文化产业有明显不同。”向勇表示,数字文化产品包含数字创意、数字传播、数字分配、数字流通和数字消费等多个环节,而上述环节往往依托于数字技术搭建的平台进行产品的全流程流通,因此对于投资者而言,在市场调研、市场反馈、风险控制方面更具透明性和可预期性。此外,从投资的未来期待的效益来说,数字化产业的想象空间也比传统产业要大得多。
广东省社会科学院财政金融研究所所长刘佳宁向南方财经全媒体记者表示,广东“文化+金融”优势明显。一方面广东文化产业基础好,文化产业起步较早,依托丰厚而独特的文化资源和产业优势,市场潜力巨大,产业数字化趋势明显。另一方面,广东金融发展基础好,有助于为文化产业创新驱动、转型升级注入新动能。
刘佳宁建议,广东应进一步大力优化多层次、多元化、多渠道的文化产业投融资市场结构,扶持和培育市场化的类金融机构,借助金融科技提升服务的精准度,着力帮助文化企业解决融资难题,支持企业实现创新发展。
探索金融支持文化产业新发展路径
近年来,广东在政策支持、服务体系支持等多个方面积极发力,积极探索金融支持文化产业加“数”发展的新路径。
在政策支持方面,2022年,广东省委、省政府出台《关于推动文化产业高质量发展的意见》明确提出,要强化数字赋能、创意驱动,着力健全现代文化产业体系和市场体系,打造数字文化引领地、文化创意新高地、文旅融合示范地,取得新进展新成效。要创新文化产业投融资体制,完善多层次、多元化、多渠道文化金融服务体系。
广东省委、省政府将文化产业纳入全省战略性新兴产业予以重点扶持,制定6个方面20条“文化经济政策包”,逐一推动落实落地;深化“放管服”改革,文化领域省级行政权力事项压减44%,进一步优化营商环境。
在服务体系方面,目前大湾区已经形成了包含资本市场、文化产业基金、风险投资基金、商业银行、民营/个人资本等投资主体的多层次文化企业融资市场,满足从领军企业、高潜力企业到中小企业初创融资的多维度融资需求。
据不完全统计,粤港澳大湾区已经有超过170家企业登陆资本市场。大湾区囊括了香港、深圳和广州三大亚洲乃至世界级的金融中心,坐拥港交所与深交所两大交易所、上百家券商以及上千家投资机构,金融资本体量巨大、活跃度极高。这为大湾区文化产业的投融资,提供了坚实的金融资本支持,为文化产业企业提供宽广的融资空间。
此外,大湾区自2019年至今超过500起一级市场直接融资,多由风险投资基金、文化产业领军企业主导,风险投资基金投资决策效率高、投融资机制成熟规范,是文化产业融资的中坚力量之一。
值得注意的是,近年来,广东积极重视利用文化产业基金撬动资本流动,为满足大湾区文化优势产业融资需求做出重要贡献。据统计,自2015年以来,广东省内由政府及国企发起的文化产业基金已有近十支,这些产业基金多通过整合国资文化企业资源,吸纳成熟的民营资本,发挥“资本+产业”的资源联动作用,已经形成多层级、全产业和主题性基金相结合的产业基金体系。
11月28日下午,大会特别设立文化产业投资基金推介环节。中国文化产业投资母基金、央视融媒体产业投资基金、AIGC中科数智文创产业基金、IDG新文体旅基金、广东省数字创意基金、粤港澳大湾区文化产业投资基金管理有限公司6家文化产业投资基金负责人就基金运行情况、投资策略、投资偏好等,面向企业路演。
备受瞩目的是,除了积极为文化企业与投融资机构牵线搭桥,引金融“活水”助力湾区文化企业发展壮大,此次大会还旨在进一步搭建起湾区文化产业投资生态圈——发起建立“粤港澳大湾区文化产业投融资联盟”。
据了解,首批联盟成员为23家机构,涵盖私募股权机构、风险投资机构、证券公司、文化国企,其中不乏中信证券、红杉资本等国内乃至国际知名的投融资机构。该联盟将立足为行业提供投融资咨询、基金设立、股权投资、上市辅导等,努力营造合作共赢和深度协同的行业氛围,为粤港澳大湾区文化产业的投融资发展贡献积极力量。
对于联盟的成立,北京大学艺术学院教授、北京大学文化产业研究院院长向勇表示,相较其他行业,文化产业的生产模式与盈利模式存在一定的特殊之处,文化产业的效益评价不仅仅包含经济效益,还应考虑产业的文化效益。因此,探索出的一套结合文化产业实际的投融资评价体系,对推动文化产业高质量发展有重要意义。“期待联盟在此方面有所探索,为广东乃至全国探索金融助力文化产业高质量发展路径先行先试。”向勇说。
(摘自:今日头条)
为企业赋能,2021深圳南山举行大数据产业交流会
近日,“数据赋能创新南山”2021深圳市南山区大数据产业交流会在国家超级计算深圳中心成功举办。本次活动由南山区工商联主办,南山区大数据产业协会承办。
南山区工商联专职副主席肖晓青表示,南山区作为深圳市经济大区、科技强区,现有海内外上市企业187家,国家级高新技术企业超4000家,2021年前三季度实现本地生产总值5460.45亿。大数据产业协会充分依托大数据产业优势,推动城市治理体系和治理能力现代化发展,积极发挥政企桥梁的作用,支撑主管部门的监管、助力产业发展。
主题演讲环节,嘉宾代表们以“数据赋能.创新南山”为主题,共同探讨大数据产业生态发展以及大数据网络信息安全,分享关于大数据产业的政策及法律合规的趋势动向,合力推动大数据的发展与应用。主题演讲后,与会嘉宾交流热烈,气氛高涨。
国家超级计算深圳中心徐一葭徐一葭部长详细介绍了深圳超算中心基本情况和二期建设的战略发展规划。她提到,超算中心是新基建的“盾构机”,它的建设将支撑、发挥新基建协同效益,带动新兴产业发展。在她看来,大数据产业存在一个数据“深加工”的需求和挑战,实际上最终还是靠人来做。目前来看,高性能交叉复合型人才稀缺,要继续做好数据中心建设的顶层设计,加强数据的应用以及人才的培育和引进。
安恒信息科技股份有限公司程文博分享,数字化改革时代的安全主要包括网络安全和数据安全。网络安全并不仅仅讲网络本身,公司主要建立了网络安全大脑,有数据终台,也有安全能力终台,我们就可以在终台上开发安全智能应用,通过不同维度,感知和防范网络安全风险。
活动现场,由深圳市南山区大数据产业协会发起的“云网融合,安全预建”公益项目宣布成立。“云网融合.安全预建”公益项目推广应用的网络安全检测系统严格按照计算机信息系统安全的国家标准、相关行业标准设计、编写、制造,可以对企业网站、公众号、web应用等不同操作系统下的计算机(在可扫描IP范围内)进行漏洞检测。
该项目主要用于分析和指出有关网络的安全漏洞及被测系统的薄弱环节,给出详细的检测报告,并针对检测到的网络安全隐患给出相应的修补措施和安全建议,从根本解决网络安全问题,起着评估整个系统安全的重要作用。
(摘自:人民资讯)
数贸大潮起之江第二届全球数字贸易博览会来了
在全球经济增速进一步放缓的局势下,数字贸易成为全球经济发展新的重要增长引擎,对贸易模式、贸易规则和贸易格局产生深刻影响。
亚运之后,杭州再次吸引全球目光。11月23日至27日,第二届全球数字贸易博览会在浙江杭州举办,这是我国唯一以数字贸易为主题的国家级、国际性、专业型展会,打造全球数字贸易风向标。
第二届数贸会精彩升级
全球数字化浪潮,风起云涌。“数字贸易 商通全球”是数贸会的主题,也是时代的呼声。
2022年,首届数贸会的成功举办,是浙江再襄盛会的最大底气。继首届数贸会场内外签约89个项目、投资总额约1100亿元,本届数贸会则从办会规格、国际化、专业性等方面“提质升级”。
从办会规格来看,本届数贸会邀请了31个省(区、市)及港澳台地区,68家国际组织和商协会、63个国家和地区的使领馆官员和政府官员,共襄数字贸易全球盛会。主宾国为芬兰、南非,主宾省(市)为福建、重庆、贵州。
国际化特色更加鲜明。本届数贸会汇聚超800家数字贸易企业,包含50余家世界500强企业,50余家全球、全国数字贸易百强榜单企业。目前,已有近1.5万家专业采购商报名观展,其中境外采购商超1700家。七大展馆中的综合馆,境外展位占比达50%以上。
数字化特点更加凸显。本届数贸会升级了“数贸在线”平台,通过搭建3D数字展览空间,实时呈现数贸会举办场景,打造“云上数贸会”,实现360度线上预设路线巡馆,让更多线上观众沉浸式体验观展。
专业化特征更加突出。本届数贸会聚焦数字贸易规则、规制、管理和标准4个维度,重点举办丝路电商、数字文化贸易、数字金融等10场主题论坛,凝聚规则标准新共识;开展全球数字贸易博览会先锋奖(DT奖)评选、“人间天堂·数贸之夜”等近百场配套活动;发布2023数字贸易企业百强榜、2023全球数字贸易行业企业Top100和全球数字贸易行业潜力人物等榜单。
首发首秀首展再创新高。本届数贸会共筹集100余项首发首秀首展成果,共建共商共促共享数字贸易领域的新技术、新产品、新服务与新场景。
例如,在前沿趋势馆,首次汇聚全球50个大模型,展示在教育、医疗、办公、汽车、人机交互等领域的前沿应用;首次举办“丝路电商日”活动,设立“丝路电商”馆,将“丝路电商”品牌打造成为数字经济时代互利共赢的国际合作典范;首次举办全球数字贸易创新大赛,设置“人工智能元宇宙”和“区块链Web3.0”两个赛道,目前已有160多个国内外优秀企业和项目团队挺进决赛,数贸会期间将举行总决赛。
“数贸会搭建了一个展示全球发展趋势、中国发展成果、浙江实践案例的互利共赢合作平台。”杭州市商务局主要负责人说,“不仅能够为中国参与全球数字贸易规则制定提供‘浙江方案’,还助推构建数字贸易时代新秩序,增创国际合作竞争新优势。”
勇当数字贸易“先行者”
当下,以5G、云计算、人工智能为代表的新技术已成为推动贸易数字化转型的重要动力源。《数字贸易发展与合作报告2023》显示,2019年至2022年,全球数字贸易增长了36.9%,高于服务贸易和货物贸易增速。
相比北京的服贸领先优势,广东的贸易出口量,海南的出口增速,浙江的数字贸易发展势头迅猛——数字贸易进出口总额连续4年超两位数增长,数字化综合水平连续2年全国第一。
身处中国数字经济和数字贸易发展“先行区”,杭州的“实力”得益于探索数字贸易领域的先发优势。
看底蕴。杭州,自古就有对外贸易的基因。《浙江经济文化史研究》一书认为,杭州的对外贸易历史从东汉三国开始,吴越国时期已初具规模;《杭州古港史》则表示,在唐、宋、元、明等朝代中,杭州都曾以主要对外贸易港的身份,与世界各国有着频繁的贸易往来。特别在两宋时期,杭州凭借发达的丝织产业推动了海上丝绸之路的繁荣,并由此获得“东南第一州”的美誉。
千年之后,杭州大力实施数字经济创新提质“一号发展工程”。深厚的数字底蕴为数字贸易发展奠定了坚实的基础。如今,杭州以数字经济为源动力,以数贸会、自贸试验区、跨境电商综合试验区、服务贸易创新发展试点等国家级平台为依托,加速拥抱千行百业,推动数字贸易走向高质量发展。
看生态。近年来,杭州建设全国首个跨境电商学院,已有20所高校开设了跨境电商专业或专业方向,年培育各类跨境电商人才近10万人次。此外,杭州跨境物流服务能级快速提升,今年以来,新增往返比隆、阿姆斯特丹等5条国际货运航线,今年上半年,杭州萧山机场国际地区货量同比增长7.02%,增幅在全国前十机场排名第一。
看制度。围绕数字贸易全产业链,杭州累积形成超过100项创新举措,包括知识产权质押融资模式创新、知识产权·国际商事调解云平台等一批首创性、引领性改革探索。近日,《杭州市数字贸易促进条例(草案)》提交杭州市人大常委会审议,全国首部数字贸易领域的地方立法加快推进。
看长项。今年前三季度,杭州实现数字贸易额2397.3亿元,占全省42.9%。从细分赛道上看,杭州拥有头部直播平台32家、直播电商企业超5000家、各类主播超5万名,数量位居全国第一。
跨境电商是数字贸易的重要组成部分。自2015年获批成立中国首个跨境电商综合试验区以来,杭州已集聚5家全球头部第三方跨境支付机构,服务全国七成用户,跨境支付结算额占全国四成。
综观全局,在趋势牵引、技术推动、政策促进和规则保障等效应叠加下,杭州数字贸易发展得以呈现领跑姿态。
以开放姿态迎数贸未来
数贸全球盛会的召开,释放了高水平对外开放的“强烈信号”。杭州筹划在数贸会期间设置十个主题展区、举办百场论坛商务活动、组织千家企业参展、邀请万名采购商参会,努力达成意向成交额500亿元,预计签约项目总投资额1000亿元。
从2023年中国国际服务贸易交易会全球服务贸易峰会的“中国将坚持推进高水平对外开放”,到第三届“一带一路”国际合作高峰论坛上宣布中国支持高质量共建“一带一路”的八项行动,再到第六届中国国际进口博览会的“中国将始终是世界发展的重要机遇”……始终彰显着中国推进高水平对外开放、与世界共享发展机遇的积极姿态。
越来越多的数字企业正依托技术优势“出海”开拓新机。有业内人士认为,本次数贸会期间,将推动数字企业“出海”规模不断扩大、技术含金量不断提高、产品品类不断拓展,相关企业在全球数字贸易中的竞争力也将进一步得到增强。
推动全力打造全球数字贸易中心。作为大会主办方,杭州正寻求跨境贸易新模式的转变,以本届数贸会为契机,将在数字自贸区的基础上全力打造全球数字贸易中心,赋能数字生态系统,实现杭州对外开放能级跃迁。
先进技术助力跨境数字贸易发展。本届数贸会上将充分讨论人工智能等数字技术在跨境贸易链条中扮演的角色,未来这些新技术将在数据分析、客户对接、营销推广等环节发挥越来越大的作用,助力企业决策,实现数字贸易的智慧化变革。
杭州数字自贸区也将实现再升级。杭州将发挥“数贸会+自贸区”叠加效应,致力于形成世界顶级展会品牌、全球一流跨境电商示范中心、全球跨境支付高地和接轨国际经贸协定试验区等八大成果,从而让数字自贸区更具引领和示范效用。
潮起之江,联动全球。面向未来,杭州将以“地瓜经济”提能升级“一号开放工程”为统领,全面打造引领全球的数字自由贸易试验区、服务全球的服贸创新发展示范区、联通全球的新电商之都、享誉全球的国际会展之都、买卖全球的国际新型消费中心和商通全球的数字贸易中心。
在第二届数贸会上,期待更多数字贸易领域的“划桨人”,激起朵朵浪花。
(摘自:钱江晚报)
大数据方面技术解析
大数据技术的体系庞大且复杂,基础的技术包含数据的采集、数据预处理、分布式存储、NoSQL数据库、数据仓库、机器学习、并行计算、可视化等各种技术范畴和不同的技术层面。
首先科学的给出一个通用化的大数据处理技术框架,主要分为下面几个方面:数据采集与预处理、数据存储、数据清洗、数据查询分析和数据可视化。以下为名词解析:
MapReduce作为Hadoop的查询引擎,用于大规模数据集的并行计算,”Map(映射)”和”Reduce(归约)”,是它的主要思想。它极大的方便了编程人员在不会分布式并行编程的情况下,将自己的程序运行在分布式系统中。
随着业务数据量的增多,需要进行训练和清洗的数据会变得越来越复杂,这个时候就需要任务调度系统,比如oozie或者azkaban,对关键任务进行调度和监控。
Oozie是用于Hadoop平台的一种工作流调度引擎,提供了RESTfulAPI接口来接受用户的提交请求(提交工作流作业),当提交了workflow后,由工作流引擎负责workflow的执行以及状态的转换。用户在HDFS上部署好作业(MR作业),然后向Oozie提交Workflow,Oozie以异步方式将作业(MR作业)提交给Hadoop。这也是为什么当调用Oozie的RESTful接口提交作业之后能立即返回一个JobId的原因,用户程序不必等待作业执行完成(因为有些大作业可能会执行很久(几个小时甚至几天))。Oozie在后台以异步方式,再将workflow对应的Action提交给hadoop执行。
Azkaban也是一种工作流的控制引擎,可以用来解决有多个hadoop或者spark等离线计算任务之间的依赖关系问题。azkaban主要是由三部分构成:RelationalDatabase,AzkabanWebServer和AzkabanExecutorServer。azkaban将大多数的状态信息都保存在MySQL中,AzkabanWebServer提供了WebUI,是azkaban主要的管理者,包括project的管理、认证、调度以及对工作流执行过程中的监控等;AzkabanExecutorServer用来调度工作流和任务,记录工作流或者任务的日志。
流计算任务的处理平台Sloth,是网易数帆首个自研流计算平台,旨在解决企业内各产品日益增长的流计算需求。作为一个计算服务平台,其特点是易用、实时、可靠,为用户节省技术方面(开发、运维)的投入,帮助用户专注于解决产品本身的流计算需求。
网易数帆致力于服务企业实现数字化创新,除Sloth外,还打造数据开发治理平台EasyData、有数BI等大数据产品,已成功服务金融、国央企、物流、制造等行业领域数百家头部客户。欢迎体验成熟、全面的大数据可行性方法论,轻松实现企业业务增长。
(摘自:知乎)
中国文化传媒集团有限公司举办文旅中国元宇宙第二届生态大会
10月18日,以“共创数字生态共赢文旅未来”为主题,由文化和旅游部产业发展司指导、中国文化传媒集团有限公司主办的文旅中国元宇宙第二届生态大会在京开幕。
文旅中国元宇宙项目是中国文化传媒集团有限公司落实文化和旅游部党组关于推进文旅新业态要求实施的数字化建设项目,经一年建设取得了一系列成果。会上,文旅中国元宇宙正式上线,中国文化传媒集团有限公司党委书记、董事长,《中国文化报》社长刘强发布文旅中国元宇宙中心城、文旅中国元宇宙数字文化商品交易模块、区块链“中国文旅链”和“忒panda”版权品等新平台新产品。第二届生态大会数字纪念徽章、《文旅中国元宇宙白皮书2.0》同期发布。
会议期间,中国文化传媒集团有限公司与蚂蚁集团、百度集团等多家企业签署合作协议。各方表示,将秉承“共识、共建、共治、共享”理念,合力建设文旅中国元宇宙应用场景生态、数字内容生态、产业生态,探索数字科技赋能内容生产传播,创新线上线下场景体验,进一步拉动文旅消费并开拓数字消费增量。
“打造文旅中国元宇宙生态链·数字场景与应用”和“打造文旅中国元宇宙生态链·品牌与数字服务”两场分论坛于10月19日举办,与会代表分享生态合作案例。会议期间还举办了首届文旅中国元宇宙创新大赛成果展示及颁奖、文旅中国元宇宙数字资源服务平台用户签约等多项活动。
文化和旅游部有关司局、直属单位,多地文旅机构和生态企业代表参加会议。
(摘自:中华人民共和国文化和旅游部)