2

探讨一种低成的本大文件存储和传输方案，目前没辙了

 8 months ago
source link: https://www.v2ex.com/t/1005613
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.
neoserver,ios ssh client
  • 文件（主要是视频）大小在 2 - 30G 之间，平均大小在 12G 左右一个，目前每天大约有 20 个左右该大小文件被创建，也就是 240G 左右
  • 文件需要被保留至少 30 天，也就是最小存储空间需要 240G * 30 = 7200G ，考虑到冗余需要 10T 左右空间
  • 该文件需要在创建完之后提供给异地下载（批量或并发下载），或者通过某种方式传输给异地（跨省）

遇到的困难

  • 存储文件成本较高
    • 如果使用 OSS 、COS 等方式，10T 一年存储费需要 ￥ 8700
  • 下载（传输）成本较高
    • 走 CDN 下载（直接 OSS 下载更贵）需要支付两部分费用
      • 回源流量费用（从 CDN 回源到 OSS ），240G/天 * 0.15 元/G * 365 天 = ￥ 13140
      • CDN 流量费用，240G/天 * 0.2 元/G * 365 = ￥ 17520
  • 如果存储在本地
    • QQ wx 等不支持如此大的文件传输，对传输总流量也有限制
    • 家庭带宽上行最多可以到 20M/S 左右，也无法满足文件传输需求（存在多人同时下载），（如果有办法把家庭带宽上行扩大到 100M/S ，勉强可以使用，听说公网 IP 多播可以做到，但是容易封号）
  • 如果采购云服务器提供下载
    • 大带宽成本天价，不考虑

待解决核心问题

  • 最核心的是如何解决文件传输流量问题，存储在本地成本较低，可以接受！

特此求助 V 站各位老师，有没有低成本传输如此大批量文件的方案，感激不尽！欢迎讨论！


report

Recommend

About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK