日本电子维修技术 NASCloudStation同步逻辑分析




# 2018-1 Update
        注意:原文写于2014年,群晖也发生了很多变化,由于我没有再使用群晖的产品,以下所写内容可能不一定适用于现在的CloudStation,仅供大伙参考。谢谢大家

本想发到hdgebi的,但想那边用群晖人多,说坏话可能不合适,我觉得CHH大家用东西都很理性,就发这里,有用的自然能搜索到这个帖。

CloudStation同步逻辑分析

在Hyper-V上试验DSM的cloud station,5.0-4493,我只想看看同步能力如何,如下:
Windows客户端设置一个同步目录,复制入一个10G大小的目录,里面大概有20W个小文件5W个目录;客户端貌似是按队列一个一个文件同步,所以小文件同步时达不到顶速且非常慢,20W个也不知道同步到猴年马月,在这方面我看还是分布式文件系统同步大量小文件有优势;在等候客户端大爷般的同步速度一天后,发现同步了一半不到,果断停止同步,换个方式;将DSM的共享文件夹映射到Windows,然后将10G的目录,复制到共享文件夹里,发现速度好像挺快的;但问题来了,10G复制了70%多后,进管理页面的filestation检查,发现某些子目录没有显示在页面的共享文件夹里,很疑惑的重新检查,发现子目录已经复制进共享文件夹了,问题在哪儿呢。。?

这里要说下,Cloudstation同步的大致原理,应该同时适用于客户端和共享映射直接拷贝,隐藏是为了防复制粘贴:
游客,如果您要查看本帖隐藏内容请回复

我出现的问题最后总结有2个情况:
10W小文件,从客户端同步完成后,发现部分文件filestation上看不到,但在Cloudstation版本历史里可以看到,这么说步骤3没有做,不知什么原因,但估计是文件太多在版本库或数据库比对那里出了问题;依然10W,直接复制到映射到共享文件夹,发现复制超过一定程度后,部分文件在filestation里看的到,但检查版本历史,居然没有这些文件的版本,真是匪夷所思,cloudstation没能这样复制的文件更新到后端的repo里,估计还是cloudstation本身问题;

当然,还是有很多文件即有真实文件,又有版本历史的,但看来Cloudstation这个东西的可用性不太靠谱,最怕就是这种同步后数据不一致折腾死人,人生已经不美好了还很高兴的以为找到了真爱,不是悲剧是什么,当然也不排除非正版的原因,反正群晖的support也不可能帮俺解决黑裙问题滴。
还是继续BTSYNC吧,尽管占用CPU厉害,同步也慢,好歹文件大致都对的上号。。。




评论

用下来感觉Win8自带的“文件历史记录”还是很实用方便的,只要指定一个本地硬盘或者网络位置就可以了。逐次备份的文件版本也分得很清。
但缺点就是明文保存,备份位置的安全性要自己想办法。


评论
我也在用cloudstation,不太好用!

评论

就是文件属性里那个“以前的版本”对吧,Win7就有了,主要我需要的是增量同步方案带版本控制像Dropbox这样的,Windows自己的离线文件试过同步也不太靠谱,所以用不了。

评论

不是,文件历史记录这个功能是Win8新增的,完善且易管理。

评论
没做过这种极限测试。cloudstation 从去年开始用过来没什么大问题。同步小说,照片,学习资料啥的。

评论

谢谢,看了下的确是新功能啊,但好像是间隔多久扫描一次,我的需求依然是外网实时同步+平台统一的文件版本,并且我需要多系统同步 win8.1 win7 win2012 win2008 。。。

评论

嘿嘿,我写出这些,也不过是为了提示使用可能会遇到的一些风险

评论
看看隐藏再发表

评论
看看说的什么

评论
看看关键的。

评论
小文件CloudStation慢死加一
因为dropbox上传速度在大陆太慢,所以CloudStation传nas,然后nas负责同步dropbox

评论

+1
同步未寫完的程式,筆電/桌面,一直沒問題

评论
回复看真相、。、。、

评论

看看隐藏再说

评论
谢谢楼主

评论
看看。。。。。

评论
真相如何?

评论
看看是怎么回事吧

评论
异地同步这个事情还是要看不同的需求,比如我吧,由于我自己手上需要同步的内容很大,大个单个文件有十几G,小的有几k的,总的内容有2T左右。所以我是用FTP来进行同步的。
之前我是测试过dropbox的同步技术是最“完美”的,但是它是商业的,而且系统不开源,所以对我无用。
也试过Owncloud,发现同步速度是硬伤,特别是同步的内容里既有大文件又有很多小文件的时候,速度慢到不能忍受。
国内最近有个Seafile项目,还是半开源的,试了下,也不够完美。


评论
来 观摩学习

评论
thank you for your sharing

评论
看看~~~~~~~

评论
kan kan ~~~~~~

评论
这功能一直就没怎么用

评论
谢谢分享支持楼主

评论
先回复在看具体内容

评论
cloudsync同步也是傻傻的,都不做文件校验的。

评论
不错,学习。。

评论
看看这个是啥感谢分享研究

评论
遇到同样的问题

评论
我也用过 给办公室财务室的机子用这个做备份  每次都提心掉胆的  感觉还是快盘等好用
如果有快盘本地版 那就不错


评论
CloudStaiton以前就同步一个文件夹,里面有20几个文件一直用的很正常,最近在mac上同步了一个大概2W个左右的比较杂的文件,发现我根本就没做修改,每次都要同步好几千个文件,可能mac本身也会产生版本文件之类的小文件,非常麻烦。

评论
看看试试啊

评论
看看试试啊

评论
感谢楼主分享

评论
看看这个是啥,研究研究。

评论
看完隐藏再发言。

评论
一直想在dsm上弄一个类似于dropbox或金山快盘的同步盘的玩意,可以双向同步、选择文件夹同步的,正在学习中。cloud station总觉得不太好使。

评论
回复看看

评论
正在找关于DSM cloud的资料,太及时了

评论
看看隐藏再说

评论
真相如何?

评论
一直没理解这个cloud station的原理,学习一下

评论
来看原理的

评论
学习一下。。。

评论
这玩意我基本不用,同步逻辑不好,而且同步设置不好,不能满足我的需求。

比如我需要我电脑上某文件夹里添加了照片,自动同步到NAS,以及家里的其他电脑,结果就不行。
感觉如果需要同步,其实用goodsync更简单点

评论
谢谢楼主分享!!

评论
想看一下楼主有什么发现?


评论
还是 直接 刻盘靠谱一些。

评论
一直没用过cloud station,因为家里上行速率实在是太弱。。

评论
kankankankan......回复才能看帖

评论
看看,经常重复复制,有没有说到?

评论
goodsync动不动就全盘分析,也没好在哪里

评论
看看隐藏了什么

评论
进来学习下

评论
学习下

评论
感谢分享,,,。

评论
感谢楼主的分享,学习一下
来看看你隐藏了啥


评论
文件体积不大的话还是onedrive或者快盘,人家的同步逻辑比较靠谱

评论
技术贴,了解一下!

评论
看看如何呢

评论
:L 这都要隐藏啊……多谢分享

评论
看看。。。。。

评论
http://h20566.www2.hp.com/hpsc/s ... a473b&swEnvOid=4064

评论
看看去,正在用同步百度云,感觉有点古怪

评论
看看回复之后的内容

评论
学习一下~~~~~~~~~~~~~

评论
来看原理,学习下

评论
回复看看情况。
刚开始用CloudStation.


评论
拜读一下

评论
看看学习一下,是挺傻的

评论
看看,正在研究~~~

评论
最新的5.2说是调整了逻辑,楼主有空看看呀。

评论
谢谢楼主分享

评论
诶...买了gen8才开始研究到底用cloud station还是owncloud还是seafile

拜读了

评论
装黑群 来看一下

评论
看看怎么同步

评论
群晖的同步早就有很多人提过,很不可靠,不建议使用,我现在主要是使用win平台的allway sync和goodsync,最近对比了下,做了记录:
Goodsync的缺点(截止9.9.24.4版本)
原文件夹中文件较多时,打开后第一次同步检测的时间较快,1万多文件大概也就1、2秒
原文件夹新建文件,该文件被同步到目标文件夹以后,创建时间将会改变,变成同步时间,而不是最初的创建时间。即使是已有文件,同步以后的文件的访问时间也会改变。
界面在最大化以后,按钮等同步扩展,但仍然在界面上有残留
无法把同步后的多余文件删除到回收站,只能保留在隐藏文件夹中
双向同步时不能自动删除文件,需要第一次手动设置以后才会记忆
原文件夹不能向多个目标文件夹同步
不能在对比以后打开文件路径
Goodsync优点
原文件夹中,文件或文件夹重命名,同步时会自动重命名目标文件夹中的文件
可以自动识别移动设备,盘符变化后不需要手动更改

Allway sync缺点(截止11.7.0pro)
原文件夹中文件较多时,打开后第一次文件校检的速度较慢,第二次开始速度变快
原文件夹重命名文件或文件夹,同步到目标文件夹时,先会删掉目标文件夹的原文件,然后把更名后的文件复制过去,浪费大量时间
Allway sync优点
同步时文件的创建时间等均不会改变
可以向多个文件夹同时同步
分析完成以后,可以直接打开文件的路径


评论
看结果~  最近一直在探索Photo Station的同步逻辑~

评论
hdgebi  现在人也不多了 啊哈

评论
还是水果的TM好用。。。。

评论
感谢楼主分享

评论
现在一直用rsync同步,暂时没出什么问题

评论
看卡呢内容哪个

评论
群晖可以装git server,小文件同步很6.

评论
同步百度云盘的压缩分卷,6个卷,5个1G,结果出错,感觉不稳定

评论

谢谢楼主分享来和楼主学习了

评论
绝世好文,不得不顶

评论
一直在用群晖的NAS!

评论
看看,学习


评论
啥原理呢

评论
讨论帖为什么还要回复可见。。。

评论
cccp-mbt,如果您要查看本帖隐藏内容请回复

评论
先看看隐藏内容再说

评论
学习,看看


评论
好东西啊,谢谢楼主分享

评论
看看什么原理

评论
kkkkkkkkkkkkkkkkkkkkkkkkkk

评论
show me, thanks!

评论
学习一下!

评论
用的黑裙。。这个功能没有用

评论
那么多的小文件,时间肯定没那么快的。

评论
看看楼主的具体内容

评论
这几天一直被CloudStation同步困扰,黑裙,PC一重启就无法连接,重新设置后就全部重新同步,无语了。 莫名其妙出现的这个问题。把硬盘拆出来装PC上,一下不上个白裙试试吧。

正好看到这帖子,谢谢楼主分享。

评论
真相怎么样在研究

评论
看看学习下。

评论
看一下!

评论
看看隐藏再发表


评论
学习参观装黑裙

评论
这个原理到底是什么?

评论
的确不好用

评论
求真相~~~

评论
看解释

评论
学习一下

评论
学习学习。

评论
瞧瞧看 什么东西瞧瞧看 什么东西

评论
看看隐藏的是什么

评论
回复看看!!

评论
回复一个看看LZ的内容是啥

评论
文件管理的确头疼

评论
顶贴来看。。。

评论
来学习 看看

评论
win10的工作文件夹同步功能不错

评论
群晖大部分软件都是虚有其表。已经想通了。

评论
看看吧   

评论

photo station我也一直用,这货的逻辑我也没搞明白,但是经常是重复上传,然后文件改名,貌似他没办法通过比对照片的特征信息来判断是不是相同照片

评论
隐藏是啥意思??

评论
了解下情况~

评论
cloudstation 昨天研究了下,他把版本控制的文件放在安装文件的隐藏目录里,而且命名方式是.1 .2 不带文件名,这点太坑了,其他几家的版本控制都在同步目录的里建文件夹,唯独他扔在安装目录还分不清文件名
现在还是主力用owncloud

评论
看看.exe

评论
回复看看 最近正在研究同步问题

评论
看看隐藏了啥?

评论
隐藏了什么东西

评论
Cloudstation同步的大致原理,应该同时适用于客户端和共享映射直接拷贝

评论
学习下,反正目前我是没看出来有什么规律~~~~

评论
想看一下可以么

评论
看看写了什么

评论
看看隐藏了什么东西

评论
我觉得cloudstation还行啊

评论
同步这个以后会越来越热

评论
正准备用cloud,看看!!!

评论
谢谢分享~~~~~~~~~

评论
来一窥究竟,学习学习

评论
喜欢技术文章!
cloudstation没怎么用,觉得不好用啊。

评论
看一下~~~看看怎么分析的哈。

评论
老帖子被顶上来了,进去看看隐藏回复的内容,一直用着黑裙,没注意过这些问题

评论
正在搞黑群,看看!

评论
刚开始用,要学习一下

评论
刚开始用,要学习一下

评论
据说DSM6.0的Cloud Station变化挺大的

评论
进来学习一下

评论
感谢楼主分享

评论
谢谢 我想看一下

评论
cloudstation是自建里的比较像金山快盘的了吧

评论
正在折腾黑裙特来学习

评论
用下来感觉Win8自带的“文件历史记录”还是很实用方便的,只要指定一个本地硬盘或者网络位置就可以了。逐次备份的文件版本也分得很清。


评论
准备启动群晖备份 学习一下

评论
感谢分享!!

评论
如果您要查看本帖隐藏内容请回复

评论
看看楼主有何高见呢

评论
学习学习!

评论
进来学习下……

评论
看下关健内容

评论
同步逻辑最好的应该还是Dropbox。。

评论
让我看一下,正琢磨架设云文件存储呢,如果这个没啥硬伤的话,就简单点用它了

评论
群晖6.0的同步策略已经改了,麻烦楼主更新一下!

评论
看看参考

评论
谢谢楼主分享

评论
之前一直在用Gen8,但是对群晖长草很久最,近刚终于下手DS216+II,正在探索中

重要数据同步的话我的第一选择还是dropbox,即使有墙

CloudStation我是用来在家里几台电脑之前拷贝非重要数据的,代替U盘,目前经过我测试效果还是十分满意的

PC和iMac同时打开Cloud Station Drive,PC上将一个500M的美剧拷贝到同步文件夹,30秒之内,iMac的同步文件夹里就出现了,这个过程比PC插U盘,拷贝,拔U盘,iMac插U盘,拷贝要方便太多

评论
看看隐藏写了啥

评论
来学习一下

评论
学习学习。

评论
先看看是啥

评论
看看隐藏,谢谢楼主不知道现在的群晖改进了没有?

评论
学习一下,谢谢分享

评论
正在学着用云端备份,收藏了。

评论

我也在用cloudstation,不太好用!

评论
这个很不错,谢谢了

评论
看看,学习!!!!

评论
正好买了216+ii,看看学习下

评论
看看隐藏的
还没用Cloudstation

评论
翻出来看看,刚开始测试,发现外网用QuickConnect同步文件稀慢!

评论
还有隐藏帖子吗。我去

评论
看看,正准备使用。

评论
我也在用cloudstation,不太好用!

评论
看看是怎么回事吧

评论
看看吧!

评论
谢谢分享~!

评论
我只看帖不说话

评论

我是goodsync的长期用户,需求基本跟你一致

单位、家里的台式机、笔记本等设备某个目录的同步需求,也就是说我单位处理了一半的文档,自动会同步到家里的机器上面

以前长期用移动存储+goodsync实现

现在用cloud station实现的很方便。

单位PC——Nas——家里PC

楼主这种问题暂时我没碰到,当然我文件少,只有两万多个~~~

评论
回复看看

评论
这个精品必须顶一下

评论

Nas 可以同步到dropbox吗?你是自己建了v p n 吗?
我现在是PC用cloud station 同步Nas,笔记本,PC 同步到onedrive ,Nas加密同步到百度云…
自己说着都觉得烦…

评论
回复看看隐藏内容.

评论
感谢楼主的分享,学习一下



评论
理解下什么东东

评论
感谢楼主的专业分析!谢谢

评论
这种牛人发的一定支持

评论
技术分享,要顶一下

评论
看看分析

评论
学习学习...

评论
看看,是什么内容

评论
谢谢分享~~~看看学习一下。准备搞台群辉。

评论
这个不错厉害

评论
虽然是2017年了,还是看看大侠的分析。
对群晖这个cloud还是不放心,没有金山快盘好用。

评论
看看是什么情况

评论
用的哪个同步软件啊


评论
看看什么内容

评论
学习了,正在用,多谢

评论
正好也在用,看看是如何工作的

评论
感觉占用空间太多了 来看看分析

评论
cloudstation的删除文件我一直没完全搞明白逻辑关系

评论
学习一下                 

评论
回贴查看,谢谢

评论
SMB的锅难道露珠不了解?

评论
看看隐藏

评论
看看说的啥

评论
我也用 小毛病真多 尤其文件多

评论
Cloudstation同步的大致原理,应该同时适用于客户端和共享映射直接拷贝

评论
学习一下,比较感兴趣

评论
那为什么cpu占用率很高呢?

评论

NAS可以**啊,不过我现在不用dropbox了,google drive的教育账户是无限容量的,所以连nas都不用了,什么都往google drive里丢,然后用odrive做本地客户端(支持单文件级别的选择性同步),比NAS省心无数倍。

评论
群晖的一些企业级功能基本都是摆设,用起来各种问题~~~

反正我只买了一台白的,其他的还是黑的走起~

评论
学习学习 目前还没用到这个功能

评论
不是故意挖坟,纯粹学习之用,感谢楼主!

评论
看看结果如何

评论
看看什么同步靠谱

评论
感谢分享,看看

评论
学习一下,技术分析类的文字现在比较少见

评论
谢谢分享,学习下同步过程

评论
看看说的啥……

评论
在用群晖 前来观摩下最近公司在用这个组内网

评论
学习一下,感谢楼主分享经验

评论
特地买了418play,但是同步选项是个头疼问题,得好好考虑下该怎么设置

评论
第一次用的时候,传压缩包到nas,然后解压缩,后面反正数据量有限,也不会出什么问题了。

评论
最近遇到问题,来看一下

评论
看看隐藏了啥

评论
只是为了看到内容

评论
牛逼了。。。

评论
被cloudstation的几倍空间占用折腾的吃不消了

评论
了解一下,同时也mark一个。

评论
感觉cloud station用着不错,我来看看关键。

评论
看看怎么样

评论
小白来回复看一下,我想白群实现跟以前百度同步盘一样的功能可以吗?


主要就是文件的同步,无论增加、删和修改,都同步到服务器。

评论
啥意思啊

评论
回复看分析结果。

评论
看看        

评论
回帖看隐藏

评论
看看这个隐藏的是什么

评论
cloudsync稳定性差,希望用这个在云盘做一个备份发现文件一致性是个大问题

评论
看一下,最近在研究 电路 电子 维修 求创维42c08RD电路图 评论 电视的图纸很少见 评论 电视的图纸很少见 评论 创维的图纸你要说 版号,不然无能为力 评论 板号5800-p42ALM-0050 168P-P42CLM-01 电路 电子 维修 我现在把定影部分拆出来了。想换下滚,因为卡纸。但是我发现灯管挡住了。拆不了。不会拆。论坛里的高手拆解过吗? 评论 认真看,认真瞧。果然有收
 ·日本留学生活 求个大阪合租
·日本留学生活 自家房招租求
·日本留学生活 东京地区出9成新lv钱包
·日本育儿教育 孩子从国内过来如何学习日语
·日本育儿教育 明年四月横滨招月嫂
·日本育儿教育 请问咋让娃突破识字关?感谢分享中文共读和学习经验的妈妈
 ·中文新闻 东区明星迈克尔·格列柯,53 岁,将在第一次出生两年后第二次
·中文新闻 《爱情岛》明星卡米拉·瑟洛和杰米·朱维特在透露即将迎来第三

维修经验

CPUcpu-z 1.77版低调发布

日本维修技术更新: New benchmark “submit and compare” feature New clocks dialog reporting all system’s clock speeds in real-time Preliminary support for Intel Kaby Lake AMD Bristol Ridge processors 主要是增加了支持I、A两个新架构的 ...

维修经验

CPU这几天经常开机黑屏,热重启后又正常

日本维修技术这几天经常开机黑屏,热重启后又正常,今天热重启也不管用了。折腾半天总算点亮,显示超频失败,以前出这个画面我是不理它的,直接重启就能正常进系统了,今天不敢托大,因为 ...

维修经验

CPU超频求助!关于华擎H170和6700K

日本维修技术问题见楼主的show贴 https://www.chiphell.com/thread-1634895-1-1.html 这次华擎的H170 Hyper最大的特色应该是自带时钟发生器可以自由超外频 可是楼主好久没有折腾超频了。。。 两图中除了CPU外频 以 ...

维修经验

CPU液态金属会侵蚀cpu核心吗?

日本维修技术前阵子看到有人说,液态金属时间长了会侵蚀cpu铜盖,那么问题来了,这货会不会侵蚀核心呢? 评论 这玩意儿好像只对铝起反应 评论 不是说,cpu的盖子是铜的吗。。。 评论 不会,核 ...

维修经验

CPUm6i究竟支不支持e3 1231v3

日本维修技术官网上看支持列表没写有e3 1231v3,装机帖又有人晒,百度也没个明确答案,那究竟能不能点亮?有在用的chher说一下么 评论 升级最新bios肯定可以支持 评论 我的p67evo官网上也没说支持12 ...

维修经验

CPU华擎 HYPER 妖板 正确玩法

日本维修技术600元的 B150,10相供电,释放洪荒之力 注意必须官网 Beta 区的 BIOS 有 AVX 的 CPU 可能会掉缓存 启动时按 X 键激活 SKY OC,重启后进入 BIOS 160924164727.jpg (95.63 KB, 下载次数: 1) 2016-9-24 17:47 上传 ...

维修经验

CPUE5 2686 V3和i7 6800K如何选择

日本维修技术默认用,不超频,两者功耗是一模一样的 E5 2686 V3:2.0主频,3.5睿频, 18核心36线程 ,45M L3 咸鱼大约2500~3000元 i7 6800K : 3.5主频,3.8睿频 ,6核心12线程 ,盒装3000元 评论 性能应该是26 ...

维修经验

CPUHD530硬解4K能力还是有点弱呀!

日本维修技术播放器用PotPlay 64bit,各种优化后,跑4K @120Hz视频只能到70帧左右的速度,勉强能用! 显示器用的4K的优派VP2780 未标题-1.jpg (211.97 KB, 下载次数: 0) 2016-9-26 21:29 上传 评论 这个估计你没优化 ...

维修经验

CPU6900k 1.25V到4.2体质怎么样

日本维修技术如图,体质怎么样,ring是35,没敢试了,都说ring高了毁硬件 评论 不错的U,但不算雕,上4.4就大雕了,这电压上4.5的目前没见有人发图 评论 谢谢前辈告知 评论 我这个用1.2V超的4.2,R ...

维修经验

CPUI3 6100 华擎B150M pro4超4.5g测试。

日本维修技术看看论坛没多少i3 6100的帖子,就转下自己发的show贴里面的数据,给大家参考下。家里还有当年的神U i3 540 oc 4.5G在给老妈用。 不知道数据上正常吗?有6100的朋友可以告诉下,另外是不有 ...

维修经验

CPU7系u会兼容100系主板吗?

日本维修技术RT,听说要推200系板,100系还能用吗以后。。 评论 兼容的 评论 感谢!以后换u就行了,目前消息200系板会有新的特性吗? 评论 24条PCI-E 3.0通道、支持Intel Optane混合存储技术、十个USB 3 ...

维修经验

CPU有心入5820k了,求教下温度问题

日本维修技术一直徘徊在6700k和5820k之间,6700k现在这德行直接把我推向了5820k啊,从2600k升级上来,三大件都要换,现在唯一疑惑的是IB-E ex这种顶级风冷能不能压住4.5g的5820呢?毕竟刚刚买一个多月。 ...

维修经验

CPU6600&6600K才100的差价

日本维修技术太少了吧。。。 6600.JPG (106.91 KB, 下载次数: 0) 2016-10-1 10:30 上传 评论 毕竟只是i5而已…… 评论 上z170 6600也能超,等于没区别,差价能有100已经不错了 评论 然后又见不超频人士推荐超频 ...