MNBVC-Wiki

本页面只读。您可以查看源文件，但不能更改它。如果您觉得这是系统错误，请联系管理员。
“我真傻，真的”， 一个将近60岁的老公务员抬起他没有神采的眼睛来，接着说。“我单知道这世界就是一个个的草台班子；我没想到里屋也是，MNBVC更是。我最初觉得MNBVC是一个挺不错的想法和项目，当初 @等战 @要不说你傻呢 他们发帖子热血沸腾的，但我这么大岁数了，已经没有多少热血了。但我还是很听话的，他们的话句句听。最初 @等战 只提供了百度网盘的分享链接，在帖子里征集其他分发方式。我前几年为了攒小姐姐，花8500买了一个115网盘的永V，有5P的空间，但买来以后发现自己其实早就已经ED了，放着也没什么用，就想着能不能把空间贡献出来做一个115网盘的分享，于是我跟 @等战 联系，表达了自己的想法，没想到他直接说‘就由你来做数据存储（分发）组的组长’，我一辈子就是一个小科员，从来没当过组长这么高级别的领导，于是就赶鸭子上架似的上头了。想着先当几天组长过过瘾，大不了过几天再让给别人。项目初创，也没多少人，我就做我力所能及的。于是我咕哧咕哧下载了上百G的数据，然后又咕哧咕哧上传到115网盘上，等分享的时候悲剧了，115说在审核，过了一周，还在审核，过了一个月，还在审核，其实两年过去了，还在审核。。。于是，我就这么草台的当上了数据存储（分发）小组的组长，这一做就是两年。”



115网盘分享虽然没成，但是既然当了数据存储（分发）小组的组长，该做的工作还得做，于是在里屋发帖子召集组员，响应非常热烈，招到了四个组员，最特别的经历就是招到了一个跨性别者，也就是后来我的副组长 @pipipe 皮皮大美女！，这是我微信里加的第一个跨性别者朋友，以至于我忘了数据存储（分发）小组是干什么的这个初衷，小心翼翼的问了她好多莫名其妙的问题，好在皮皮是一个酒（久）精（经）考验的成熟的跨性别者，解答了我很多疑惑，让我对这个领域有了深入浅出的认识。嗯，跑题儿了，说正事儿，说正事儿，其实正经工作也没耽误，最初我们试验了P2P、FTP、HTTP各种分享方式，最先搭建起来的是微力同步(verysync）这种P2P分享方式，后来还试验了Syncthing，但由于两者之间存在冲突，Syncthing方式后来被取消了。我还在单位的老破电脑上利用单位的公网IP搭建了FTP和HTTP分享方式，但是，很快我就发现MNBVC语料集中不能说黄赌毒都有吧，但违法违规的东西真的不少，这要是被有关部门盯上了，对我单位的影响我不敢说，但我可能要面临去蹬缝纫机的结局，征求@等战 @老龙 @傻哥 几位大佬的意见，他们比我还不靠谱，好在最后傻哥一锤定音，把FTP和HTTP分享方式毅然停掉了。



至于 @等战 说的我一直天天向上要资源，天天PUA他们，纯粹就是欲加之罪，何患无辞。说这个之前，我先介绍一下我们小组的工作流程：MNBVC语料集是由几百个（目前是800多个）zip文件组成的，@等战 通过百度网盘分享这些zip文件，为每个zip文件建立一个百度网盘分享链接，发布到MNBVC的github页面上，而我们小组需要有一个人将他发布的zip文件分享链接挨个点开，转存到自己的百度网盘上，然后再打总分享给我（当然，很多时候我自己也要做这个转存工作），我再将这个打总分享的数据转存到自己的百度网盘上，再用百度网盘客户端下载到本机，然后还要挨个检验下载的zip包是否正确，然后再将zip包放到微力同步的分享目录中。剩下的就是一直开机，保证各同步节点能够接收到数据。这个流程中，最费神的操作就是挨个点开等战发布的分享链接然后转存这个过程，我最初的要资源就是希望他能把每次新发布的zip包打个包共享给我们小组，省得我们挨个去转存，对于他来说其实就是举手之劳，但特么的就这点儿资源他也不给我们，还给自己找了一个托辞，说我们得在挨个转存的时候帮他检查github上发布的分享链接是否有错误。。。这理由够硬也够狠，我们认了，闷头接下了这个苦逼的搬砖工作。



第二个要资源，就是我们一直想要提供一个http下载方式。考虑到法律风险，这个服务器不能在国内。另外，存储空间还要足够大。我们小组的组员都在国内，基本上没有这个能力。但MNBVC其他小组大牛不少，比如说 符尧 博士，据说在美国自家后院就有一个几百P的存储集群。但我跟这些大牛不熟啊，于是就要求等战帮着在群里吆喝一声，就这，他也没同意。就这么说吧，我所谓的要资源，最后就是什么也没要到。



我们小组干的活儿没啥技术含量，就是MNBVC这个大项目中搬砖的小工，这小工还得纯粹是靠爱发电，不但没工资，没资源，还得不断搭钱进去。我们是真傻，真的。以我为例吧，最初语料集的数据量不大，我下载机上那个6T硬盘能对付，但突然发现我的网络对付不了。不对不对，我记忆出现了偏差，最初是等战家的网络对付不了。微力同步刚搭建起来的时候，等战是原始分发节点，我是唯一的接收节点（我当时不需要从百度网盘上转存下载），但微力同步由于是P2P分享方式，网络连接数太多，等战家的烂交换机质量太差，经常死机断流，于是他毅然绝然的大义灭亲，退出了微力分享，然后就改成了我只能从百度网盘上下载他分享的链接，我作为原始的微力分发节点。后来，随着微力节点的增多，我发现我的交换机和路由器也受不了，也开始出现断流，后来我就只能限制连接数和上传速度。MNBVC的数据量增长最初速度并不快，在数据量（压缩后）达到4T时，我的6T硬盘空间不够了（因为上面还存着我下载的小姐姐们），于是我将6T硬盘换成了8T硬盘，然后在24年下半年，数据量井喷，8T硬盘也不够了，于是我又将硬盘换成了18T硬盘，目前数据量8.5T。最初的四个组员，有两个因为这个原因基本上退出了，没退出的经历的过程跟我类似，基本上经常在投钱买硬盘和扩充存储上折腾得死去活来。



啥也不说了，自己约的那个啥，含泪也得打完，痛并痛着吧。我真傻，真的。希望各位兄弟姐妹侄子侄女们，看在MNBVC这个有伟大前途的事业的面子上，有钱的捧个钱场，没钱的捧个人场，加入我们数据存储（分发）小组，我这个组长愿意退位让贤！我来过，我做过，我走了。。。为了全人类！



(发帖时间Beijing: 2025-01-08 09:48:00 |Beijing: 2025/1/8 09:48:00)

---xclimbing