搜索历史
热搜词
「星际鑫航」杜雪平:IPFS技术在CDN领域的应用与思考
| 2021-01-25 16:58
“分布式云”启动新商业引擎,“云原生”引爆亿万级苍穹,“分布式数据及存储”开创未来新篇。
2020年12月17日至18日, “Distributed Cloud|2020全球分布式云大会”在深圳正式拉开帷幕。大会邀请到华为云、腾讯云、阿里云、金山云、浪潮云、蚂蚁集团、政府主管部门、标准制订方、以及深圳TOP200流量主级运营商等云原生、边缘云开发者相关企业共同参与,以推动技术变革,适应时代发展。
 
在12月18日下午的“分布式存储论坛”上,深圳星际鑫航科技有限公司CEO杜雪平带来《IPFS技术在CDN领域的应用与思考》为题的主题演讲。


 
演讲中,杜雪平对去中心化存储、IPFS存储和发展及Gamma OS——这款星际鑫杭自主研发的分布式存储智能运维平台,如何快速建Filecoin大集群这三个问题进行了阐述。杜雪平认为,IPFS天然是一个CDN,文件添加到IPFS网络,将会在全世界进行CDN加速。
 
星际鑫杭2018年开始切入区块链行业。从早前的无人问津,到目前的价值大涨,在区块链的赛道上,从业者在积极拥抱这个时代,时代也在拥抱从业者。对于这一点,杜雪平深有感触。
 
在2019的10月份,习近平总书记也提出了区块链底层技术服务和新型智慧城市建设相结合,探索在信息基础设施、智慧交通、能源电力等领域的推广应用,去中心化存储是大势所趋。
 
随着物联网技术与5G网络的快速发展,网络边缘设备急剧增加,其所产生的数据以爆炸式增长。根据思科可视化网络指数报告,到2021年,全球IP数据流量将达到3.3ZB,其中边缘设备产生的移动数据量占全球数据流量的 63%,较2016年增长6.7倍,边缘设备将成为数据生产的主流。
 
Web3.0是以数字化、云端化、智能化为最大特点。去中心化的计算和存储将成为Web3.0数字经济时代的两大基石。杜雪平表示,Web3.0以数据安全性和隐私性为两大标志,而Filecoin的数据存储本身就带有加密功能,在数据的安全性和隐私性上有比较好的保护。
 
以Filecoin项目为例,从2020年10月15日上线至今,短短2个多月时间里,全网的算力数据是在1.4PiB,规模可达300亿。包括现在接入的客户和传统的金融企业,之前在区块链比较观望,现在也开始关注。除了投资,还拿出一些专项的基金,甚至是大类资产配置资金,购买技术和矿机,然后参与挖矿。
 
杜雪平认为IPFS本身就是CDN。IPFS的底层本身就是一个Web,它是去中心化的分布式存储协议。如果把文件、视频、图片等加载到IPFS里,可以在全世界进行CDN加速。星际鑫杭用IPFS协议和S3协议做了对比,用不同大小的文件,1G、500MB、100MB、50MB、10MB、5MB、1MB数据来进行了对比。通过测试发现,对于本地存储和局域网存储,IPFS的存储性能略低于拷贝,这是由于IPFS 需要对文件进行分片存储。
 
对于线上的环境,带宽成为上传速度的最大瓶颈,但是IPFS的性能表现依然不差,对于 100MB 以下的小文件,IPFS 的表现甚至要比七牛云更优。杜雪平讲解道:“进一步考虑到IPFS本身的各种优势以及特点,IPFS 节点是自带CDN加速的,即节点越多,IPFS的存储系统的读取效率将会更高。同一个文件在第二次存储的时候,IPFS只需要判断其哈希值就可以,不需要再次分片以及存储工作,速度会非常快。”
 
Gamma OS是星际鑫杭自主研发的分布式存储智能运维平台,是一个垂直化的硬件运维和挖矿系统,可以用于大批量服务器的运维管理。这个平台的特点是:每个技术人员可以管理多个节点,在软件上做到自动化监控,运维上做到自动化管理。
 
Gamma OS在警报管理上做得特别好。杜雪平介绍道:“比如说机器在进行大量计算的时候,如果复制证明和时空证明出现问题,我们会有警报,用语音播报的方式播报出来,会有语音的提醒,然后再把这个警报发送到机房。”整个过程,在运维、管理和布局挖矿上做到智能化。几千台矿机都在运行,尤其是散热问题,出现GPU掉线问题,人力没有办法观察和感受到的,通过Gamma OS,都可以非常清晰地知道每一款机器、每一个硬件的运行情况。
一键挖矿,一键部署。使用IPFS做分布式云存储,将大有可为。这就是杜雪平对IPFS的憧憬。
阅读 参与讨论 评论(0)

强化五一假期效应 虹魔方发力大屏运营
 04月28日
强化五一假期效应 虹魔方发力大屏运营
倪健中会长:推动中国发起全球元宇宙大会联合会
 01月04日
倪健中会长:推动中国发起全球元宇宙大会联合会
第五届数智中国科技周·全球元宇宙大会(深圳站)收官战报...
 01月04日
第五届数智中国科技周·全球元宇宙大会(深圳站)收官战报来啦!
学术盛宴!人工智能国际治理学术论坛12月18日下午重磅举办!
 01月02日
学术盛宴!人工智能国际治理学术论坛12月18日下午重磅举办!
深广电王斌:数字科技引领媒体融合
 01月02日
深广电王斌:数字科技引领媒体融合