网心云吧 关注:23,409贴子:156,582

【2021网心云第一帖 亦为本人关于网心云的最后一贴】

只看楼主收藏回复

首先给大家送上新年祝福,希望大家在新的一年里身体健康工作顺利家庭和谐生意兴隆。
关于网心云的话题我们已经聊了不少,实际上,网心云涉及到的网络知识和技术说多不多,说少也不少,但是对于大部分非兴趣类玩家来说,最关心的无疑是如何提高收益,能够最简单快捷地实现高收益才是重点,其他的都是浮云。想获得高收益的前提是优化网络环境以及优化存储系统性能,这两点在我前面的综合性帖子里已经说了大半,这里不再赘述。因为种种原因,我将不会继续更新网心云的技术贴了,此贴即为终点,当然,我会在这里将最为核心的技巧分享给大家,我是一个卖电脑的生意人,但是我不靠这个搞网心云赚钱,所以我所提供给大家的完全是免费的,用爱发电是我的宗旨,希望一起探讨或者希望获得我帮助的朋友尽管在帖子下留言,不要提给我报酬的事,在此声明一下。
正式研究网心云相关的东西已经两个月了,从初期的试水到现在准备上马,中间这2个月我做了大量的测试,其中耗费我最多时间的项目只有一个——如何提高存储系统的性能。是的,你没有看错,存储系统的性能。简单的说,就是如何让通过技术手段实现机械硬盘组性能达到甚至超过普通固态硬盘的问题。通过实测,最终我达到了一个自认为非常好的结果,我利用缓存手段成功实现了这一点,让我的机械硬盘组在跑量高峰期时IO吞吐量超过了大部分SATA固态硬盘。下面上一个图跟大家解释一下。

上图可以看到,通过缓存技术,我的3T 机械硬盘的IO性能已经超过大部分固态硬盘了。大家可以自行查看自己的硬盘的性能,方法相信不用我多说了。比较一下就知道我下面所说的事情的重要性了。顺带说一下我最终达到的收益情况。
目前我用了4条宽带进行了测试,分别是电信家宽2条,移动联通各1条,所有宽带都是上行20兆下行100兆的普通家用宽带。通过多拨之后,总体上上行带宽叠加到了600兆左右。目前最新收益为每日52元多一点。2号开始部署的,硬盘数据全部清空状态下开始的测试,今天是5号,缓存下载量其实并不大,但是收益确已经达到了很不错的状态,相信大部分网友都无法达到我这个状态,但是我相信,大家用过自己的学习和实践,最终也能达到或者超过我,额外提一下,我所在的区域是安徽,没有任何奖励。

附部分机器收益,收益持续提高中

通过前期大量的实测,严格地说是因为没有任何前人经验,所以走了大量弯路,还好最终解决了问题。VM作为虚拟机,虽然磁盘性能高于HYERP-V,但是,只要上缓存,就会出现出现数据校验错误,所以我们最终选择hyper-v,必须使用hyper-v hyper-v hyper-v,重要的事情说三遍。Hyper-v稳定高效且占用很低,与系统高度整合,稳定性也非常强,虽然原生的磁盘性能比VM低点,但是通过缓存技术,其磁盘性能完全碾压了VM。最后,我会通过一系列的截图来将缓存方案分享给大家,有问题可以留言讨论。好了,我的帖子就到这里了,且不会继续更新。再次祝福大家新年行大运,青山不改绿水长流,江湖再见!




IP属地:安徽1楼2021-01-05 18:48回复
    支持!


    IP属地:广东来自iPhone客户端4楼2021-01-05 22:21
    回复
      如果满足大水管的条件,物理机可以跑下大水管的业务,x86的业务属于小水管,物理机很难利用好带宽,甚至更多情况下带宽利用率低于50%。虚拟机多开能极大地提高网络带宽的利用率。同时,就算是物理机,机械硬盘的性能也不可能达到我优化之后的这个水平,你可以试试看。网心云的x86核心是centos,我观察过,就算是直接上物理机,也不会有任何主动性的缓存行为,这个还是必须通过第三方软件才能实现,达到良好的加速效果。


      IP属地:安徽5楼2021-01-05 23:09
      收起回复
        centos没有windows server类似的内存自动回收机制,随着运行时间的加长,占用内存会线性增加,一般我们都是通过命令行 echo 1 > /proc/sys/vm/drop_caches 来回收内存的,如果不主动回收,占用内存将会巨大,且不是用来做缓存的,对于跑量无任何好处。windows下的虚拟机首先有设置里的内存限制,其次windows有内存回收机制,虽然没有第三方专业的内存管理软件那么有效率,但是基本不会占用过多内存。


        IP属地:安徽6楼2021-01-06 01:17
        收起回复
          部署大量虚拟机提高命中率,最大化让带宽跑起来,机械缓存阵列降低固态成本提高存储量又提高了后期大量缓存内容的命中率,感觉很不错,感谢分享,学习学习


          IP属地:上海7楼2021-01-06 09:56
          收起回复
            贴吧需要你,大叔


            IP属地:广东8楼2021-01-06 16:06
            回复
              @扇子大叔,大叔,私信一下我,有要事沟通


              IP属地:广东9楼2021-01-06 16:09
              收起回复
                没有开二缓有效果吗?SSD情况下还要开缓存吗


                IP属地:福建来自Android客户端12楼2021-01-08 18:41
                收起回复
                  支持大叔 感谢大叔 想提两个问题 之前没用过傲腾 请问选择16G或者32G效果一样么?您组得去多少个虚拟机?一共用了多大硬盘呢?我之前用unraid直通跑网心云 小打小闹 今天见了您的方案 醍醐灌顶


                  IP属地:内蒙古来自Android客户端14楼2021-01-09 07:32
                  收起回复
                    楼主,我全部上了SSD+物理机跑,是不是不用考虑io问题了。一机一SSD


                    IP属地:河南来自iPhone客户端15楼2021-01-09 11:14
                    收起回复
                      具体怎么设置缓存能教一下嘛


                      IP属地:广西来自iPhone客户端16楼2021-01-09 12:35
                      收起回复
                        具体怎么设置缓存能教一下嘛?


                        IP属地:海南来自iPhone客户端17楼2021-01-09 12:58
                        收起回复
                          大佬,我准备用NUC来跑,配置是N3700的低功耗U,8G内存,1T2.5寸SSD。本来计划是直接物理机跑。但是看了你的贴以后,想用虚拟机多跑几个了。我的这个配置能跑几个啊,用VM还是esxi还群晖VMM,还是hy跑呢?带宽是一根500M下50M上,一根200M下100M上,一根500M下250M上。目前有3个这个NUC,一个高配群晖(i5-8500,64G内存,2T SSD 100T机械8个盘)。


                          IP属地:河南来自iPhone客户端18楼2021-01-09 15:33
                          收起回复
                            每上传1G流量是多少钱,这个官方都不说明,所以这样的技术贴子没有什么价值。


                            IP属地:江苏来自Android客户端19楼2021-01-09 19:27
                            收起回复
                              我是用的一台E2651 v2机子,十二核二十四线程U,暂时是两条8G服务器内存,共计16G,硬盘奇形怪状,有固态,有各种容量的机械盘,两条300M的电信,支持五拨,虽然一小时一断线,请问扇子大叔我该怎么设置合适一些呢?想听听您的建议,然后开始折腾下。内存随时可加。


                              IP属地:山东20楼2021-01-10 11:31
                              收起回复