VictoriaFreSh 2021.4.18 → 2021.5.28

checksums.yaml

@@ -1,7 +1,7 @@
 ---
 SHA256:
-  metadata.gz: 82c0c58d9b1daeffc9217b052959a5b67bf8547a2c51e58cb1fcfa4632fa1839
-  data.tar.gz: 341d862e0b92956637f54c8bd482e93e6ac0ad907a07c6532605008a4a5dc66a
+  metadata.gz: 8dccd4410ecd8d6d3ad20d3ca30020736cd018ae14c7728f2313f0f9e4b87b7c
+  data.tar.gz: 4476c85fb65741600504908278d701d5f88b75b4258573b34e080715ad3bde13
 SHA512:
-  metadata.gz: 3dbc4bc708a277f8d2d4b5277aecd1ba9c5ecd5f3075dcf2d7ac68849bd526e0ef821e747b140fd82aa3f1b6f61860a30dc737dc57b75470eea635a49d412f41
-  data.tar.gz: 33db88a60ea8c9fd03562089312df3e6ddda6bfc41517d29177586a541278871e58075b4b9af057838935f8f089c3727373a682afc79a449a53de5b4377f34d8
+  metadata.gz: d7189f646a689dd8c2973a65566255f4bb2cc98922b0d25a1bb87d3f758db40a81c4e6eb8b040508bb4e372c97b400727d79aa3de3ff5553b18529bdced02853
+  data.tar.gz: 5bc32692595af2ed94f54c53368ebbd39bcdbb9582c95606a706353ee624c0fc6ee499a1ad49a54c544d17ac33ec10ff8f5af135097f487ade184cc17ee790c4

data/lib/victoriafresh.rb

@@ -12,6 +12,7 @@ class VictoriaFresh
     attr_accessor :diskFileName #向磁盘写入数据时的文件名或前缀
     attr_accessor :diskMultiFile #向磁盘写入时，是否要写多个文件 
     attr_accessor :diskFlush #要提前磁盘写入文件，以节省内存吗？
+    attr_accessor :currentDiskFlushSuffix #当前的文件后缀。也等价于已经写入的文件片段个数
     
     def initialize
         @diskFlush=false #要向磁盘写入文件
@@ -23,6 +24,7 @@ class VictoriaFresh
         @contentPartArray=[] #内容片段数组
         @currentDiskFlushSuffix=0 #当前的磁盘文件后缀
         @bufferLength=0 #缓冲区总长度
+        @externalDataFile={} #外部数据文件对象
     end
     
     def checkMemoryUsage(lineNumber)
@@ -32,17 +34,54 @@ class VictoriaFresh
         
     end #def checkMemoryUsage
     
-    
     def releaseFiles(victoriaFreshPackagedFileString, contentString) #释放目录树
-        #         packagedFile=Com::Stupidbeauty::Victoriafresh::FileMessage.decode(victoriaFreshPackagedFileString) #解码文件消息对象。
         packagedFile=CBOR.decode(victoriaFreshPackagedFileString) #解码
         
-        
-        puts packagedFile #Debug
+#         puts packagedFile #Debug
         
         releaseFile('.', packagedFile, contentString) #释放一个文件 
     end #def releaseFiles(victoriaFreshPackagedFile, contentString) #释放目录树
     
+    def releaseFilesExternalDataFile(victoriaFreshPackagedFileString, externalDataFileName) #释放目录树
+        packagedFile=CBOR.decode(victoriaFreshPackagedFileString) #解码
+        
+#         puts packagedFile #Debug
+        
+        @externalDataFile=File.open(externalDataFileName, 'rb') #打开文件
+        
+        releaseFileExternalDataFile('.', packagedFile) #释放一个文件 
+        
+        @externalDataFile.close #关闭文件
+    end #def releaseFiles(victoriaFreshPackagedFile, contentString) #释放目录树
+    
+    def writeFileExternalDataFile(pathPrefix, packagedFile) #写入文件
+        timeObject=getTimeObject(packagedFile) #构造时间戳对象
+        
+        @externalDataFile.seek(packagedFile['file_start_index']) #定位到起始位置
+        
+        victoriaFreshData=@externalDataFile.read(packagedFile['file_length']) #读取内容
+        
+        #         victoriaFreshData=contentString[packagedFile.file_start_index, packagedFile.file_length] #获取内容
+#         victoriaFreshData=contentString[ packagedFile['file_start_index'], packagedFile['file_length'] ] #获取内容
+        
+        #         pathToMake=pathPrefix + '/' + packagedFile.name #构造文件名
+        pathToMake=pathPrefix + '/' + packagedFile['name'] #构造文件名
+        
+        victoriaFreshDataFile=File.new(pathToMake , "wb", packagedFile['permission']) #数据文件。
+        victoriaFreshDataFile.syswrite(victoriaFreshData) #写入文件。
+        victoriaFreshDataFile.close #关闭文件。
+        
+        FileUtils.touch pathToMake, :mtime => timeObject #设置修改时间
+        
+        permissionNumber=packagedFile['permission'] #获取权限数字
+        
+        if (permissionNumber.nil?) #不带权限字段
+        elsif #带权限字段
+            File.chmod(permissionNumber, pathToMake) #设置权限
+        end #if (permissionNumber.nil?) #不带权限字段
+        
+    end #def writeFileExternalDataFile(pathPrefix, packagedFile) #写入文件
+    
     def writeFile(pathPrefix, packagedFile, contentString) #写入文件
         
         timeObject=getTimeObject(packagedFile) #构造时间戳对象
@@ -68,6 +107,34 @@ class VictoriaFresh
         
     end #writeFile(pathPrefix, packagedFile, contentString) #写入文件
     
+    #创建符号链接
+    def makeSymlinkExternalDataFile(pathPrefix, packagedFile)
+        @externalDataFile.seek(packagedFile['file_start_index']) #定位到起始位置
+        
+        victoriaFreshData=@externalDataFile.read(packagedFile['file_length']) #读取内容
+#         victoriaFreshData=contentString[ packagedFile['file_start_index'], packagedFile['file_length'] ] #获取内容
+        
+        pathToMake=pathPrefix + '/' + packagedFile['name'] #构造文件名
+        
+        puts("data: #{victoriaFreshData}, path: #{pathToMake}") #Debug
+        
+        FileUtils.symlink(victoriaFreshData, pathToMake, force: true) #创建符号链接
+        
+        permissionNumber=packagedFile['permission'] #获取权限数字
+        
+        if (permissionNumber.nil?) #不带权限字段
+        elsif #带权限字段
+            #             File.chmod(permissionNumber, pathToMake) #设置权限
+            begin #尝试修改链接本身的权限
+                File.lchmod(permissionNumber, pathToMake) #设置权限
+            rescue NotImplementedError #未实现
+                puts 'File.lchmod not implemented' #Debug
+            rescue Errno::ENOENT => e
+                puts "Rescued by Errno::ENOENT statement. #{pathToMake}" #报告错误
+            end #begin #尝试修改链接本身的权限
+        end #if (permissionNumber.nil?) #不带权限字段
+    end #def makeSymlinkExternalDataFile(pathPrefix, packagedFile)
+    
     #创建符号链接
     def makeSymlink(pathPrefix, packagedFile, contentString) 
         puts("start index: #{packagedFile['file_start_index']}, length: #{packagedFile['file_length']}, content string length: #{contentString.bytesize}") #Debug
@@ -134,6 +201,24 @@ class VictoriaFresh
         end #if (permissionNumber.nil?) #不带权限字段
     end #makeDirectory(pathPrefix, packagedFile) #创建目录
     
+    def releaseFileExternalDataFile(pathPrefix, packagedFile) #释放一个文件
+        if packagedFile['is_file'] #是文件，则直接写入文件
+            writeFileExternalDataFile(pathPrefix, packagedFile) #写入文件
+        elsif packagedFile['is_symlink'] #是符号链接，则创建符号链接
+            makeSymlinkExternalDataFile(pathPrefix, packagedFile) #创建符号链接
+        else #是目录，则创建目录，并递归处理
+            makeDirectory(pathPrefix, packagedFile) #创建目录
+            
+            direcotryPathPrefix=pathPrefix  + '/' + packagedFile['name'] #构造针对该目录的路径前缀
+            
+            subFiles=packagedFile['sub_files'] #获取子文件列表。
+            
+            subFiles.each do |currentSubFile| #一个个子文件地释放
+                releaseFileExternalDataFile(direcotryPathPrefix, currentSubFile) #释放子文件
+            end #subFiles.each do |currentSubFile| #一个个子文件地释放
+        end #if packagedFile.is_file #是文件，则直接写入文件
+    end #def releaseFileExternalDataFile(pathPrefix, packagedFile) #释放一个文件
+    
     def releaseFile( pathPrefix, packagedFile, contentString) #释放一个文件 
         if packagedFile['is_file'] #是文件，则直接写入文件
             writeFile(pathPrefix, packagedFile, contentString) #写入文件

data/victoriafresh.example.rb

@@ -9,7 +9,7 @@ else #指定了命令行参数。
   
   $clipDownloader=VictoriaFresh.new #创建下载器。
 
-  $clipDownloader.diskFlush=true #向磁盘写入缓存
+  $clipDownloader.diskFlush=false #不向磁盘写入缓存
   $clipDownloader.diskMultiFile=true #写多个磁盘文件
   $clipDownloader.diskFileName='victoriafreshdata.v.' #磁盘文件名前缀
   $clipDownloader.diskFlushSize=32*1024*1024 #磁盘文件大小
@@ -27,7 +27,7 @@ else #指定了命令行参数。
   
   victoriaFreshFile.close #关闭文件。
   
-#   victoriaFreshDataFile=File.new("victoriafreshdata.v","wb") #数据文件。
-#   victoriaFreshDataFile.syswrite(victoriaFreshData) #写入文件。
-#   victoriaFreshDataFile.close #关闭文件。
+  victoriaFreshDataFile=File.new("victoriafreshdata.v","wb") #数据文件。
+  victoriaFreshDataFile.syswrite(victoriaFreshData) #写入文件。
+  victoriaFreshDataFile.close #关闭文件。
 end

metadata

@@ -1,14 +1,14 @@
 --- !ruby/object:Gem::Specification
 name: VictoriaFreSh
 version: !ruby/object:Gem::Version
-  version: 2021.4.18
+  version: 2021.5.28
 platform: ruby
 authors:
 - Hxcan Cai
-autorequire: 
+autorequire:
 bindir: bin
 cert_chain: []
-date: 2021-04-17 00:00:00.000000000 Z
+date: 2021-05-28 00:00:00.000000000 Z
 dependencies:
 - !ruby/object:Gem::Dependency
   name: cbor
@@ -30,6 +30,20 @@ dependencies:
     - - ">="
       - !ruby/object:Gem::Version
         version: 0.5.9.6
+- !ruby/object:Gem::Dependency
+  name: get_process_mem
+  requirement: !ruby/object:Gem::Requirement
+    requirements:
+    - - ">="
+      - !ruby/object:Gem::Version
+        version: 0.2.7
+  type: :runtime
+  prerelease: false
+  version_requirements: !ruby/object:Gem::Requirement
+    requirements:
+    - - ">="
+      - !ruby/object:Gem::Version
+        version: 0.2.7
 description: Virtual file system.
 email: caihuosheng@gmail.com
 executables: []
@@ -43,7 +57,7 @@ homepage: http://rubygems.org/gems/VictoriaFreSh
 licenses:
 - MIT
 metadata: {}
-post_install_message: 
+post_install_message:
 rdoc_options: []
 require_paths:
 - lib
@@ -58,8 +72,8 @@ required_rubygems_version: !ruby/object:Gem::Requirement
     - !ruby/object:Gem::Version
       version: '0'
 requirements: []
-rubygems_version: 3.0.3
-signing_key: 
+rubygems_version: 3.2.15
+signing_key:
 specification_version: 4
 summary: VictoriaFreSh
 test_files: []