abank 0.4.3 → 0.4.5

checksums.yaml

@@ -1,7 +1,7 @@
 ---
 SHA256:
-  metadata.gz: 8a808298a6ff4b9e8ee6d29c1088dd3f0195af3981fbb5e586f4fec0548a93d0
-  data.tar.gz: 9e9b16ac7a215b35dbac0dd88d4b50beafd8197df0f82ab0a089bd809f9a59ce
+  metadata.gz: 919ed7397ffc15a6ff4f0f99865da47b8a090f6bf838798f1ca122e667e7f0a2
+  data.tar.gz: cf1d5cc84cc1bbc765969e183ff4cda28c70ca19de7a9c59c95da56ca3e41830
 SHA512:
-  metadata.gz: 327723d64f377a8f8e279b4914f270e0dd27922a97af218e0744dde8a4bbab4f887d776da1bf543eba9fa3f2e17d9edbcc7545631a05f6d5bf9a707d586349d4
-  data.tar.gz: f2ca3c359e176d829e23dfc95b57f18b6c83f9d1212bee32fceccaef242cf7e37a4db653324f28208150bf813881d19dfb6018e4bf57cf62255b43b8ef667973
+  metadata.gz: d7bb91bb62ec11e4051d06e4b007dec13a3f6cd904da1cdc7c1096c07e6b95676f756f8cac5faee0dc732f4f2abf50f7fe72760efcf82e909743f64f4dcf182e
+  data.tar.gz: 9750de979e437b44cf210b9245bb22b91b39d289049a84f373ab714632d4ab6c15e55688a17c8d8b8c61df8a4add2663cc8b9b3b606986a888152ebc5ada9d2d

data/Gemfile

@@ -6,3 +6,4 @@ source 'https://rubygems.org'
 gemspec
 
 gem 'rake', '~> 12.0'
+gem 'nokogiri', '~> 1.18.1', platforms: [:ruby], require: false

data/Gemfile.lock

@@ -1,7 +1,7 @@
 PATH
   remote: .
   specs:
-    abank (0.4.3)
+    abank (0.4.5)
       google-cloud-bigquery
       roo
       thor
@@ -9,79 +9,122 @@ PATH
 GEM
   remote: https://rubygems.org/
   specs:
-    addressable (2.8.4)
-      public_suffix (>= 2.0.2, < 6.0)
+    addressable (2.8.7)
+      public_suffix (>= 2.0.2, < 7.0)
     ast (2.4.2)
     backport (1.2.0)
-    benchmark (0.2.1)
-    concurrent-ruby (1.2.2)
+    base64 (0.2.0)
+    benchmark (0.4.0)
+    bigdecimal (3.1.9)
+    concurrent-ruby (1.3.4)
     declarative (0.0.20)
-    diff-lcs (1.5.0)
+    diff-lcs (1.5.1)
+    dry-configurable (1.3.0)
+      dry-core (~> 1.1)
+      zeitwerk (~> 2.6)
+    dry-core (1.1.0)
+      concurrent-ruby (~> 1.0)
+      logger
+      zeitwerk (~> 2.6)
+    dry-inflector (1.2.0)
+    dry-initializer (3.2.0)
+    dry-logic (1.6.0)
+      bigdecimal
+      concurrent-ruby (~> 1.0)
+      dry-core (~> 1.1)
+      zeitwerk (~> 2.6)
+    dry-schema (1.13.4)
+      concurrent-ruby (~> 1.0)
+      dry-configurable (~> 1.0, >= 1.0.1)
+      dry-core (~> 1.0, < 2)
+      dry-initializer (~> 3.0)
+      dry-logic (>= 1.4, < 2)
+      dry-types (>= 1.7, < 2)
+      zeitwerk (~> 2.6)
+    dry-types (1.8.0)
+      bigdecimal (~> 3.0)
+      concurrent-ruby (~> 1.0)
+      dry-core (~> 1.0)
+      dry-inflector (~> 1.0)
+      dry-logic (~> 1.4)
+      zeitwerk (~> 2.6)
     e2mmap (0.1.0)
-    faraday (2.7.10)
-      faraday-net_http (>= 2.0, < 3.1)
-      ruby2_keywords (>= 0.0.4)
-    faraday-net_http (3.0.2)
-    google-apis-bigquery_v2 (0.57.0)
-      google-apis-core (>= 0.11.0, < 2.a)
-    google-apis-core (0.11.1)
+    faraday (2.12.2)
+      faraday-net_http (>= 2.0, < 3.5)
+      json
+      logger
+    faraday-net_http (3.4.0)
+      net-http (>= 0.5.0)
+    google-apis-bigquery_v2 (0.83.0)
+      google-apis-core (>= 0.15.0, < 2.a)
+    google-apis-core (0.15.1)
       addressable (~> 2.5, >= 2.5.1)
-      googleauth (>= 0.16.2, < 2.a)
-      httpclient (>= 2.8.1, < 3.a)
+      googleauth (~> 1.9)
+      httpclient (>= 2.8.3, < 3.a)
       mini_mime (~> 1.0)
+      mutex_m
       representable (~> 3.0)
       retriable (>= 2.0, < 4.a)
-      rexml
-      webrick
-    google-cloud-bigquery (1.43.1)
+    google-cloud-bigquery (1.51.1)
+      bigdecimal (~> 3.0)
       concurrent-ruby (~> 1.0)
-      google-apis-bigquery_v2 (~> 0.1)
+      google-apis-bigquery_v2 (~> 0.71)
+      google-apis-core (~> 0.13)
       google-cloud-core (~> 1.6)
-      googleauth (>= 0.16.2, < 2.a)
+      googleauth (~> 1.9)
       mini_mime (~> 1.0)
-    google-cloud-core (1.6.0)
-      google-cloud-env (~> 1.0)
+    google-cloud-core (1.7.1)
+      google-cloud-env (>= 1.0, < 3.a)
       google-cloud-errors (~> 1.0)
-    google-cloud-env (1.6.0)
-      faraday (>= 0.17.3, < 3.0)
-    google-cloud-errors (1.3.1)
-    googleauth (1.7.0)
-      faraday (>= 0.17.3, < 3.a)
+    google-cloud-env (2.2.1)
+      faraday (>= 1.0, < 3.a)
+    google-cloud-errors (1.4.0)
+    google-logging-utils (0.1.0)
+    googleauth (1.12.2)
+      faraday (>= 1.0, < 3.a)
+      google-cloud-env (~> 2.2)
+      google-logging-utils (~> 0.1)
       jwt (>= 1.4, < 3.0)
-      memoist (~> 0.16)
       multi_json (~> 1.11)
       os (>= 0.9, < 2.0)
       signet (>= 0.16, < 2.a)
     httpclient (2.8.3)
-    jaro_winkler (1.5.6)
-    json (2.6.3)
-    jwt (2.7.1)
-    kramdown (2.4.0)
-      rexml
+    jaro_winkler (1.6.0)
+    json (2.9.1)
+    jwt (2.10.1)
+      base64
+    kramdown (2.5.1)
+      rexml (>= 3.3.9)
     kramdown-parser-gfm (1.1.0)
       kramdown (~> 2.0)
-    kwalify (0.7.2)
     language_server-protocol (3.17.0.3)
-    memoist (0.16.2)
-    mini_mime (1.1.2)
+    logger (1.6.5)
+    mini_mime (1.1.5)
+    mini_portile2 (2.8.8)
     multi_json (1.15.0)
-    nokogiri (1.15.3-x86_64-linux)
+    mutex_m (0.3.0)
+    net-http (0.6.0)
+      uri
+    nokogiri (1.18.1)
+      mini_portile2 (~> 2.8.2)
       racc (~> 1.4)
     os (1.1.4)
-    parallel (1.23.0)
-    parser (3.2.2.3)
+    parallel (1.26.3)
+    parser (3.3.6.0)
       ast (~> 2.4.1)
       racc
-    public_suffix (5.0.3)
-    racc (1.7.1)
+    public_suffix (6.0.1)
+    racc (1.8.1)
     rainbow (3.1.1)
     rake (12.3.3)
     rbs (2.8.4)
-    reek (6.1.4)
-      kwalify (~> 0.7.0)
-      parser (~> 3.2.0)
+    reek (6.4.0)
+      dry-schema (~> 1.13.0)
+      logger (~> 1.6)
+      parser (~> 3.3.0)
       rainbow (>= 2.0, < 4.0)
-    regexp_parser (2.8.1)
+      rexml (~> 3.1)
+    regexp_parser (2.10.0)
     representable (3.2.0)
       declarative (< 0.1.0)
       trailblazer-option (>= 0.1.1, < 0.2.0)
@@ -89,32 +132,30 @@ GEM
     retriable (3.1.2)
     reverse_markdown (2.1.1)
       nokogiri
-    rexml (3.2.6)
-    roo (2.10.0)
+    rexml (3.4.0)
+    roo (2.10.1)
       nokogiri (~> 1)
       rubyzip (>= 1.3.0, < 3.0.0)
-    rubocop (1.55.1)
+    rubocop (1.70.0)
       json (~> 2.3)
       language_server-protocol (>= 3.17.0)
       parallel (~> 1.10)
-      parser (>= 3.2.2.3)
+      parser (>= 3.3.0.2)
       rainbow (>= 2.2.2, < 4.0)
-      regexp_parser (>= 1.8, < 3.0)
-      rexml (>= 3.2.5, < 4.0)
-      rubocop-ast (>= 1.28.1, < 2.0)
+      regexp_parser (>= 2.9.3, < 3.0)
+      rubocop-ast (>= 1.36.2, < 2.0)
       ruby-progressbar (~> 1.7)
-      unicode-display_width (>= 2.4.0, < 3.0)
-    rubocop-ast (1.29.0)
-      parser (>= 3.2.1.0)
+      unicode-display_width (>= 2.4.0, < 4.0)
+    rubocop-ast (1.37.0)
+      parser (>= 3.3.1.0)
     ruby-progressbar (1.13.0)
-    ruby2_keywords (0.0.5)
-    rubyzip (2.3.2)
-    signet (0.17.0)
+    rubyzip (2.4.1)
+    signet (0.19.0)
       addressable (~> 2.8)
       faraday (>= 0.17.5, < 3.a)
       jwt (>= 1.5, < 3.0)
       multi_json (~> 1.10)
-    solargraph (0.49.0)
+    solargraph (0.50.0)
       backport (~> 1.2)
       benchmark
       bundler (~> 2.0)
@@ -130,20 +171,25 @@ GEM
       thor (~> 1.0)
       tilt (~> 2.0)
       yard (~> 0.9, >= 0.9.24)
-    thor (1.2.2)
-    tilt (2.2.0)
+    thor (1.3.2)
+    tilt (2.6.0)
     trailblazer-option (0.1.2)
     uber (0.1.0)
-    unicode-display_width (2.4.2)
-    webrick (1.8.1)
-    yard (0.9.34)
+    unicode-display_width (3.1.4)
+      unicode-emoji (~> 4.0, >= 4.0.4)
+    unicode-emoji (4.0.4)
+    uri (1.0.2)
+    yard (0.9.37)
+    zeitwerk (2.6.18)
 
 PLATFORMS
+  ruby
   x86_64-linux
 
 DEPENDENCIES
   abank!
   bundler
+  nokogiri (~> 1.18.1)
   rake (~> 12.0)
   reek
   rubocop

data/lib/abank/big.rb

@@ -0,0 +1,301 @@
+# frozen_string_literal: true
+
+require('google/cloud/bigquery')
+
+module Abank
+  BD = 'hernanilr.ab'
+
+  # @see Big
+  class Big
+    DF = '%Y-%m-%d'
+
+    # @return [Hash] opcoes trabalho
+    attr_reader :opcao
+
+    # @return [Google::Cloud::Bigquery::Data] resultado do Structured Query Language (SQL) no bigquery
+    attr_reader :bqres
+
+    # @return [Integer] numero linhas afetadas pelo Data Manipulation Language (DML) no bigquery
+    attr_reader :bqnrs
+
+    # @return [Integer] contrato arrendamento em tratamento
+    attr_reader :ctpos
+
+    # @return [Integer] movimento do contrato arrendamento em tratamento
+    attr_reader :mvpos
+
+    # acesso a base dados abank no bigquery
+    #
+    # @param [Thor::CoreExt::HashWithIndifferentAccess] opcoes trabalho
+    # @option opcoes [String]  :k ('') movimentos a apagar (keysin.mv)
+    # @option opcoes [String]  :c ('') id contrato arrendamento (re)
+    # @option opcoes [String]  :d ('') data inicio contrato arrendamento (re)
+    # @option opcoes [Boolean] :t (false) trabalha todas as rendas? (re)
+    # @return [Hash] opcoes trabalho
+    def initialize(opcoes = {})
+      @opcao = opcoes
+      opcao
+    end
+
+    # @return [Google::Cloud::Bigquery] API bigquery
+    def bqapi
+      @bqapi ||= Google::Cloud::Bigquery.new
+    end
+
+    # @return [String] movimentos a apagar (keysin.mv)
+    def mvkys
+      opcao[:k][/([-+]*\d)+(,[-+]*\d+)*/].to_s
+    end
+
+    # apaga movimentos & suas rendas associadas no bigquery
+    #
+    # @return [Big] acesso a base dados abank no bigquery
+    def mv_delete
+      @ctlct = []
+      unless mvkys.empty?
+        # obtem lista contratos arrendamento associados aos movimentos a apagar
+        @ctlct = sql("select distinct ct from #{BD}.mv where #{ky_mv} in(#{mvkys}) and substr(ct,1,1)='r'")
+
+        # apaga todas as rendas dos contratos arrendamento associados aos movimentos a apagar
+        opcao[:t] = true unless ctlct.empty?
+        re_apaga.mv_delete_dml
+      end
+      self
+    end
+
+    # apaga movimentos no bigquery
+    def mv_delete_dml
+      dml("delete from #{BD}.mv where #{ky_mv} in(#{mvkys})")
+      puts("MOVIMENTOS APAGADOS #{bqnrs}")
+    end
+
+    # (see CLI#tag)
+    def mv_classifica
+      dml("update #{BD}.mv set mv.ct=tt.nct from (select * from #{BD}.cl) as tt where #{ky_mv}=tt.ky")
+      puts("MOVIMENTOS CLASSIFICADOS #{bqnrs}")
+      @ctlct = sql("select distinct ct from #{BD}.re") if bqnrs.positive?
+      self
+    end
+
+    # @return [String] expressao sql da chave de movimentos
+    def ky_mv
+      'FARM_FINGERPRINT(CONCAT(CAST(mv.nc as STRING),mv.ds,CAST(mv.dl as STRING),CAST(mv.vl as STRING)))'
+    end
+
+    # (see CLI#criact)
+    def ct_cria
+      unless ct_existe?
+        dml("insert into #{BD}.re #{sql_contrato_mv}")
+        puts("CONTRATO #{opcao[:c]} #{bqnrs.zero? ? 'NAO ' : ''}INSERIDO")
+      end
+      # processar rendas sim/nao?
+      return unless bqnrs.positive? && opcao[:t]
+
+      # processa rendas associadas ao contrato arrendamento
+      ct_dados.re_insert
+    end
+
+    # @return [Boolean] contrato arrendamento ja existe sim/nao?
+    def ct_existe?
+      @ctlct = [{ ct: opcao[:c] }]
+      vaz = sql("select ct from #{BD}.re where ct in(#{str_lc}) and cnt=0").empty?
+      unless vaz
+        @bqnrs = 1
+        puts('CONTRATO JA EXISTE')
+      end
+      !vaz
+    end
+
+    # (see CLI#apagact)
+    def ct_apaga
+      @ctlct = [{ ct: opcao[:c] }]
+      re_delete_dml
+    end
+
+    # optem lista dados contrato arrendamento (inclui lista movimentos novos)
+    #
+    # @return [Big] acesso a base dados abank no bigquery
+    def ct_dados
+      ctlct.map! do |ctr|
+        opcao[:c] = ctr[:ct]
+        lre = sql(sql_last_re)[0]
+        ctr.merge(lre, mv: sql(sql_novo_mv(lre[:dl])))
+      end
+      self
+    end
+
+    # @param [Array] are lista rendas novas atual
+    # @return [Array<String>] lista rendas novas duma lista contratos arrendamento
+    def ct_rendas(lre = [])
+      while ctpos < ctlct.size
+        @mvpos = 0
+        lre += re_rendas
+        @ctpos += 1
+      end
+      lre
+    end
+
+    # @example sem dados movimentos
+    #   [{ ct: 'r03000' }, ...]
+    # @example com dados movimentos
+    #   [{ct: 'r03000', dc: '2020-03-01', ano: 2020, cnt: 0, dl: '2020-03-01', mv: [{dl: '2020-03-02', vl: 30}, ...]  }]
+    # @return [Array<Hash>] lista dados contrato arrendamento (inclui lista movimentos novos)
+    def ctlct
+      @ctlct ||= []
+    end
+
+    # @return [String] texto formatado que representa lista de contratos arrendamento
+    def str_lc(sep = "'")
+      ctlct.map { |cid| sep + cid[:ct] + sep }.join(',')
+    end
+
+    # @return [String] sql para obter ultima renda do contrato arrendamento
+    def sql_last_re
+      'select ct,DATE_SUB(DATE_SUB(dl,INTERVAL dias DAY),INTERVAL IF(cnt=0,0,cnt-1) MONTH) dc,ano,cnt,dl'\
+            ',CAST(REGEXP_EXTRACT(ct,r"\d+") as numeric)/100 vr '\
+        "from #{BD}.re where ct='#{opcao[:c]}' order by ano desc,cnt desc limit 1"
+    end
+
+    # @return [String] sql para obter movimentos novos (depois da ultima renda do contrato arrendamento)
+    def sql_novo_mv(mdl)
+      "select dl,vl from #{BD}.mv where ct='#{opcao[:c]}' and dl>='#{(mdl + 1).strftime(DF)}' order by dl,dv"
+    end
+
+    # @return [String] sql para obter dados do inicio contrato arrendamento
+    def sql_contrato_mv
+      cti = opcao[:c]
+      dat = opcao[:d]
+      if dat.empty?
+        'select ct,EXTRACT(YEAR FROM DATE_TRUNC(dl,MONTH)) ano,0 cnt,DATE_TRUNC(dl,MONTH) dl,0 dias '\
+          "from #{BD}.mv where ct='#{cti}' order by dl limit 1"
+      else
+        "select '#{cti}' ct,EXTRACT(YEAR FROM DATE '#{dat}') ano,0 cnt,DATE '#{dat}' dl,0 dias"
+      end
+    end
+
+    # (see CLI#recriare)
+    def re_atualiza
+      # [re]cria rendas novas/todas dos contratos ativos
+      @ctlct = sql("select distinct ct from #{BD}.re")
+      re_apaga.ct_dados.re_insert
+    end
+
+    # insere rendas associadas a lista contratos arrendamento no bigquery
+    def re_insert
+      @ctpos = 0
+      vls = ct_rendas.join(',')
+      if vls.empty?
+        puts('NAO EXISTEM RENDAS NOVAS')
+      else
+        dml("insert #{BD}.re VALUES#{vls}")
+        puts("RENDAS #{str_lc('')} CRIADAS #{bqnrs}")
+      end
+    end
+
+    # apaga rendas da lista de contrato arrendamento
+    #
+    # @return [Big] acesso a base dados abank no bigquery
+    def re_apaga
+      return self if !opcao[:t] || ctlct.empty?
+
+      # para nao apagar contrato arrendamento - somente as rendas
+      opcao[:t] = false
+
+      re_delete_dml
+      self
+    end
+
+    # @return [Array<String>] lista rendas novas dum contrato arrendamento
+    def re_rendas
+      lre = []
+      while mvpos < re_atual[:mv].size && re_saldo_mv?
+        lre << re_nova_renda
+        @mvpos += 1 unless re_saldo_mv?
+      end
+      lre
+    end
+
+    # @return [String] renda formatada (values.re)
+    def re_nova_renda
+      re_proximos_dados
+      "('#{re_atual[:ct]}',#{ano},#{cnt},'#{re_atual_mv[:dl].strftime(DF)}',#{dias})"
+    end
+
+    # @return [Hash] dados contrato arrendamento (inclui lista movimentos novos)
+    def re_proximos_dados
+      # valor renda paga retirada do movimento
+      re_atual_mv[:vl] -= re_atual[:vr]
+      dre = cnt.zero? ? Date.new(ano, 1, 1) : Date.new(ano, cnt, 1) >> 1
+      re_atual.merge!(ano: dre.year, cnt: dre.month)
+    end
+
+    # apaga rendas da lista de contratos arrendamento
+    def re_delete_dml
+      dml("delete from #{BD}.re where ct in(#{str_lc})#{opcao[:t] ? '' : ' and cnt>0'}")
+      puts("RENDAS #{str_lc('')} APAGADAS #{bqnrs}")
+    end
+
+    # @return [Boolean] movimento com saldo suficiente?
+    def re_saldo_mv?
+      re_atual_mv[:vl] >= re_atual[:vr]
+    end
+
+    # @return [Hash] dados contrato arrendamento atual (inclui lista movimentos novos)
+    def re_atual
+      ctlct[ctpos]
+    end
+
+    # @return [Hash] movimento atual contrato arrendamento
+    def re_atual_mv
+      re_atual[:mv][mvpos]
+    end
+
+    # @return [Integer] ano da renda
+    def ano
+      re_atual[:ano]
+    end
+
+    # @return [Integer] numero da renda (0-12)
+    def cnt
+      re_atual[:cnt]
+    end
+
+    # @return [Integer] dias atraso/antecipo neste pagamento renda
+    def dias
+      re_atual_mv[:dl].mjd - (Date.new(ano, cnt, 1) >> (re_atual[:dc].month - 1)).mjd
+    end
+
+    # @param [String] cmd comando a executar
+    # @return [Google::Cloud::Bigquery::QueryJob] tarefa SQL/DML no bigquery
+    def job(cmd)
+      bqjob = bqapi.query_job(cmd)
+      bqjob.wait_until_done!
+      err = bqjob.error
+      puts(err['message']) if err
+      bqjob
+    end
+
+    # executa Structured Query Language (SQL) no bigquery
+    #
+    # @param (see job)
+    # @param [Array] erro resultado quando falha execucao
+    # @return [Google::Cloud::Bigquery::Data] resultado do SQL
+    def sql(cmd, erro = [])
+      # se job.failed? executa job(cmd).data => StandardError
+      @bqres = job(cmd).data
+    rescue StandardError
+      @bqres = erro
+    end
+
+    # executa Data Manipulation Language (DML) no bigquery
+    #
+    # @param (see job)
+    # @return [Integer] numero rows afetadas pelo DML
+    def dml(cmd)
+      # se job.failed? executa Integer(nil) => StandardError
+      @bqnrs = Integer(job(cmd).num_dml_affected_rows)
+    rescue StandardError
+      @bqnrs = 0
+    end
+  end
+end

data/lib/abank/{folha1.rb → folha.rb}

@@ -79,10 +79,14 @@ module Abank
       #  array.count > 1 ==> nao pode carregar esta linha
       sql(sql_existe_mv, [{}, {}])
 
-      if linha_naoexiste? then linha_base + values_mv
-      elsif linha_existe? then linha_existe
-      elsif linha_simila? then linha_similar
-      else                     linha_multiplas
+      if linha_naoexiste?
+        linha_base + values_mv
+      elsif linha_existe?
+        linha_existe
+      elsif linha_simila?
+        linha_similar
+      else
+        linha_multiplas
       end
     end
 
@@ -98,5 +102,78 @@ module Abank
       end
       self
     end
+
+    # @return [Boolean] linha folha calculo nao existe no bigquery?
+    def linha_naoexiste?
+      bqres.empty?
+    end
+
+    # @return [Boolean] linha folha calculo existe no bigquery?
+    def linha_existe?
+      bqres.count == 1 && bqres.first[:ds].strip == rowfc[2]
+    end
+
+    # @return [Boolean] linha folha calculo existe parecida no bigquery?
+    def linha_simila?
+      bqres.count == 1 && bqres.first[:ds].strip != rowfc[2]
+    end
+
+    # @return [String] texto base formatado para display
+    def linha_base
+      "#{rowfc[0].strftime(DF)} #{format('%<v3>-34.34s %<v4>8.2f', v3: rowfc[2], v4: rowfc[3])}"
+    end
+
+    # @return [String] texto linha existente formatada para display
+    def linha_existe
+      add_kys if opcao[:e]
+      "#{linha_base} EXIS #{format('%<v1>20d', v1: bqres.first[:ky])}"
+    end
+
+    # @return [String] texto linha similar formatada para display
+    def linha_similar
+      add_kys if opcao[:s]
+      "#{linha_base} SIMI #{format('%<v1>-20.20s', v1: bqres.first[:ds].strip)}"
+    end
+
+    # @return [String] texto linha existencia multipla formatada para display
+    def linha_multiplas
+      "#{linha_base} MULT(#{bqres.count})"
+    end
+
+    # obtem chaves movimento (keysin.mv) para apagar
+    def add_kys
+      bqres.each { |row| opcao[:k] += ",#{row[:ky]}" }
+    end
+
+    # @return [String] sql para movimentos no bigquery
+    def sql_existe_mv
+      "select *,#{ky_mv} as ky from #{BD}.mv where nc=#{conta} and dl='#{rowfc[0].strftime(DF)}' and vl=#{rowfc[3]}"
+    end
+
+    # obtem movimento (values.mv) para inserir
+    #
+    # @return [String] ' NOVO'
+    def values_mv
+      @mvvls += ",('#{rowfc[0].strftime(DF)}','#{dvc.strftime(DF)}','#{rowfc[2]}',#{rowfc[3]}"\
+                ",#{conta},#{dvc.year},#{dvc.month},'#{tpc}',#{ctc})"
+      ' NOVO'
+    end
+
+    # @return [Date] data valor corrigida
+    def dvc
+      dvl = opcao[:v]
+      dvl.empty? ? rowfc[1] : Date.parse(dvl)
+    end
+
+    # @return [String] classificacao do movimento (null --> classificacao automatica)
+    def ctc
+      cmv = opcao[:g]
+      cmv.empty? ? 'null' : "'#{cmv}'"
+    end
+
+    # @return [String] tipo movimento c[redito] ou d[ebito]
+    def tpc
+      rowfc[3].positive? ? 'c' : 'd'
+    end
   end
 end

data/lib/abank/version.rb

@@ -1,5 +1,5 @@
 # frozen_string_literal: true
 
 module Abank
-  VERSION = '0.4.3'
+  VERSION = '0.4.5'
 end

data/lib/abank.rb

@@ -1,17 +1,13 @@
 # frozen_string_literal: true
 
 require('thor')
-require('abank/big1')
-require('abank/big2')
-require('abank/big3')
-require('abank/folha1')
-require('abank/folha2')
+require('abank/big')
+require('abank/folha')
 require('abank/version')
 
 # @author Hernani Rodrigues Vaz
 module Abank
   DR = "/home/#{`whoami`.chomp}/Downloads"
-  BD = 'hernanilr.ab'
 
   # CLI para carregar folhas calculo comuns no bigquery
   class CLI < Thor

metadata

@@ -1,14 +1,14 @@
 --- !ruby/object:Gem::Specification
 name: abank
 version: !ruby/object:Gem::Version
-  version: 0.4.3
+  version: 0.4.5
 platform: ruby
 authors:
 - Hernâni Rodrigues Vaz
-autorequire: 
+autorequire:
 bindir: exe
 cert_chain: []
-date: 2023-08-02 00:00:00.000000000 Z
+date: 2025-01-14 00:00:00.000000000 Z
 dependencies:
 - !ruby/object:Gem::Dependency
   name: bundler
@@ -159,11 +159,8 @@ files:
 - bin/setup
 - exe/abank
 - lib/abank.rb
-- lib/abank/big1.rb
-- lib/abank/big2.rb
-- lib/abank/big3.rb
-- lib/abank/folha1.rb
-- lib/abank/folha2.rb
+- lib/abank/big.rb
+- lib/abank/folha.rb
 - lib/abank/version.rb
 - ruby-lint.yml
 homepage: https://github.com/hernanirvaz/abank
@@ -172,7 +169,7 @@ licenses:
 metadata:
   homepage_uri: https://github.com/hernanirvaz/abank
   yard.run: yard
-post_install_message: 
+post_install_message:
 rdoc_options: []
 require_paths:
 - lib
@@ -188,7 +185,7 @@ required_rubygems_version: !ruby/object:Gem::Requirement
       version: '0'
 requirements: []
 rubygems_version: 3.3.7
-signing_key: 
+signing_key:
 specification_version: 4
 summary: Arquiva movimentos conta-corrente, conta-cartao do activobank no bigquery.
 test_files: []

data/lib/abank/big1.rb

@@ -1,108 +0,0 @@
-# frozen_string_literal: true
-
-require('google/cloud/bigquery')
-
-module Abank
-  # @see Big
-  class Big
-    # @return [Hash] opcoes trabalho
-    attr_reader :opcao
-
-    # @return [Google::Cloud::Bigquery::Data] resultado do Structured Query Language (SQL) no bigquery
-    attr_reader :bqres
-
-    # @return [Integer] numero linhas afetadas pelo Data Manipulation Language (DML) no bigquery
-    attr_reader :bqnrs
-
-    # acesso a base dados abank no bigquery
-    #
-    # @param [Thor::CoreExt::HashWithIndifferentAccess] opcoes trabalho
-    # @option opcoes [String]  :k ('') movimentos a apagar (keysin.mv)
-    # @option opcoes [String]  :c ('') id contrato arrendamento (re)
-    # @option opcoes [String]  :d ('') data inicio contrato arrendamento (re)
-    # @option opcoes [Boolean] :t (false) trabalha todas as rendas? (re)
-    # @return [Hash] opcoes trabalho
-    def initialize(opcoes = {})
-      @opcao = opcoes
-      opcao
-    end
-
-    # @return [Google::Cloud::Bigquery] API bigquery
-    def bqapi
-      @bqapi ||= Google::Cloud::Bigquery.new
-    end
-
-    # @return [String] movimentos a apagar (keysin.mv)
-    def mvkys
-      opcao[:k][/([-+]*\d)+(,[-+]*\d+)*/].to_s
-    end
-
-    # apaga movimentos & suas rendas associadas no bigquery
-    #
-    # @return [Big] acesso a base dados abank no bigquery
-    def mv_delete
-      @ctlct = []
-      unless mvkys.empty?
-        # obtem lista contratos arrendamento associados aos movimentos a apagar
-        @ctlct = sql("select distinct ct from #{BD}.mv where #{ky_mv} in(#{mvkys}) and substr(ct,1,1)='r'")
-
-        # apaga todas as rendas dos contratos arrendamento associados aos movimentos a apagar
-        opcao[:t] = true unless ctlct.empty?
-        re_apaga.mv_delete_dml
-      end
-      self
-    end
-
-    # apaga movimentos no bigquery
-    def mv_delete_dml
-      dml("delete from #{BD}.mv where #{ky_mv} in(#{mvkys})")
-      puts("MOVIMENTOS APAGADOS #{bqnrs}")
-    end
-
-    # (see CLI#tag)
-    def mv_classifica
-      dml("update #{BD}.mv set mv.ct=tt.nct from (select * from #{BD}.cl) as tt where #{ky_mv}=tt.ky")
-      puts("MOVIMENTOS CLASSIFICADOS #{bqnrs}")
-      @ctlct = sql("select distinct ct from #{BD}.re") if bqnrs.positive?
-      self
-    end
-
-    # @return [String] expressao sql da chave de movimentos
-    def ky_mv
-      'FARM_FINGERPRINT(CONCAT(CAST(mv.nc as STRING),mv.ds,CAST(mv.dl as STRING),CAST(mv.vl as STRING)))'
-    end
-
-    # @param [String] cmd comando a executar
-    # @return [Google::Cloud::Bigquery::QueryJob] tarefa SQL/DML no bigquery
-    def job(cmd)
-      bqjob = bqapi.query_job(cmd)
-      bqjob.wait_until_done!
-      err = bqjob.error
-      puts(err['message']) if err
-      bqjob
-    end
-
-    # executa Structured Query Language (SQL) no bigquery
-    #
-    # @param (see job)
-    # @param [Array] erro resultado quando falha execucao
-    # @return [Google::Cloud::Bigquery::Data] resultado do SQL
-    def sql(cmd, erro = [])
-      # se job.failed? executa job(cmd).data => StandardError
-      @bqres = job(cmd).data
-    rescue StandardError
-      @bqres = erro
-    end
-
-    # executa Data Manipulation Language (DML) no bigquery
-    #
-    # @param (see job)
-    # @return [Integer] numero rows afetadas pelo DML
-    def dml(cmd)
-      # se job.failed? executa Integer(nil) => StandardError
-      @bqnrs = Integer(job(cmd).num_dml_affected_rows)
-    rescue StandardError
-      @bqnrs = 0
-    end
-  end
-end

data/lib/abank/big2.rb

@@ -1,102 +0,0 @@
-# frozen_string_literal: true
-
-module Abank
-  # acesso a base dados abank no bigquery
-  class Big
-    DF = '%Y-%m-%d'
-
-    # @return [Integer] contrato arrendamento em tratamento
-    attr_reader :ctpos
-
-    # (see CLI#criact)
-    def ct_cria
-      unless ct_existe?
-        dml("insert into #{BD}.re #{sql_contrato_mv}")
-        puts("CONTRATO #{opcao[:c]} #{bqnrs.zero? ? 'NAO ' : ''}INSERIDO")
-      end
-      # processar rendas sim/nao?
-      return unless bqnrs.positive? && opcao[:t]
-
-      # processa rendas associadas ao contrato arrendamento
-      ct_dados.re_insert
-    end
-
-    # @return [Boolean] contrato arrendamento ja existe sim/nao?
-    def ct_existe?
-      @ctlct = [{ ct: opcao[:c] }]
-      vaz = sql("select ct from #{BD}.re where ct in(#{str_lc}) and cnt=0").empty?
-      unless vaz
-        @bqnrs = 1
-        puts('CONTRATO JA EXISTE')
-      end
-      !vaz
-    end
-
-    # (see CLI#apagact)
-    def ct_apaga
-      @ctlct = [{ ct: opcao[:c] }]
-      re_delete_dml
-    end
-
-    # optem lista dados contrato arrendamento (inclui lista movimentos novos)
-    #
-    # @return [Big] acesso a base dados abank no bigquery
-    def ct_dados
-      ctlct.map! do |ctr|
-        opcao[:c] = ctr[:ct]
-        lre = sql(sql_last_re)[0]
-        ctr.merge(lre, mv: sql(sql_novo_mv(lre[:dl])))
-      end
-      self
-    end
-
-    # @param [Array] are lista rendas novas atual
-    # @return [Array<String>] lista rendas novas duma lista contratos arrendamento
-    def ct_rendas(lre = [])
-      while ctpos < ctlct.size
-        @mvpos = 0
-        lre += re_rendas
-        @ctpos += 1
-      end
-      lre
-    end
-
-    # @example sem dados movimentos
-    #   [{ ct: 'r03000' }, ...]
-    # @example com dados movimentos
-    #   [{ct: 'r03000', dc: '2020-03-01', ano: 2020, cnt: 0, dl: '2020-03-01', mv: [{dl: '2020-03-02', vl: 30}, ...]  }]
-    # @return [Array<Hash>] lista dados contrato arrendamento (inclui lista movimentos novos)
-    def ctlct
-      @ctlct ||= []
-    end
-
-    # @return [String] texto formatado que representa lista de contratos arrendamento
-    def str_lc(sep = "'")
-      ctlct.map { |cid| sep + cid[:ct] + sep }.join(',')
-    end
-
-    # @return [String] sql para obter ultima renda do contrato arrendamento
-    def sql_last_re
-      'select ct,DATE_SUB(DATE_SUB(dl,INTERVAL dias DAY),INTERVAL IF(cnt=0,0,cnt-1) MONTH) dc,ano,cnt,dl'\
-            ',CAST(REGEXP_EXTRACT(ct,r"\d+") as numeric)/100 vr '\
-        "from #{BD}.re where ct='#{opcao[:c]}' order by ano desc,cnt desc limit 1"
-    end
-
-    # @return [String] sql para obter movimentos novos (depois da ultima renda do contrato arrendamento)
-    def sql_novo_mv(mdl)
-      "select dl,vl from #{BD}.mv where ct='#{opcao[:c]}' and dl>='#{(mdl + 1).strftime(DF)}' order by dl,dv"
-    end
-
-    # @return [String] sql para obter dados do inicio contrato arrendamento
-    def sql_contrato_mv
-      cti = opcao[:c]
-      dat = opcao[:d]
-      if dat.empty?
-        'select ct,EXTRACT(YEAR FROM DATE_TRUNC(dl,MONTH)) ano,0 cnt,DATE_TRUNC(dl,MONTH) dl,0 dias '\
-          "from #{BD}.mv where ct='#{cti}' order by dl limit 1"
-      else
-        "select '#{cti}' ct,EXTRACT(YEAR FROM DATE '#{dat}') ano,0 cnt,DATE '#{dat}' dl,0 dias"
-      end
-    end
-  end
-end

data/lib/abank/big3.rb

@@ -1,101 +0,0 @@
-# frozen_string_literal: true
-
-module Abank
-  # @see Big
-  class Big
-    # @return [Integer] movimento do contrato arrendamento em tratamento
-    attr_reader :mvpos
-
-    # (see CLI#recriare)
-    def re_atualiza
-      # [re]cria rendas novas/todas dos contratos ativos
-      @ctlct = sql("select distinct ct from #{BD}.re")
-      re_apaga.ct_dados.re_insert
-    end
-
-    # insere rendas associadas a lista contratos arrendamento no bigquery
-    def re_insert
-      @ctpos = 0
-      vls = ct_rendas.join(',')
-      if vls.empty?
-        puts('NAO EXISTEM RENDAS NOVAS')
-      else
-        dml("insert #{BD}.re VALUES#{vls}")
-        puts("RENDAS #{str_lc('')} CRIADAS #{bqnrs}")
-      end
-    end
-
-    # apaga rendas da lista de contrato arrendamento
-    #
-    # @return [Big] acesso a base dados abank no bigquery
-    def re_apaga
-      return self if !opcao[:t] || ctlct.empty?
-
-      # para nao apagar contrato arrendamento - somente as rendas
-      opcao[:t] = false
-
-      re_delete_dml
-      self
-    end
-
-    # @return [Array<String>] lista rendas novas dum contrato arrendamento
-    def re_rendas
-      lre = []
-      while mvpos < re_atual[:mv].size && re_saldo_mv?
-        lre << re_nova_renda
-        @mvpos += 1 unless re_saldo_mv?
-      end
-      lre
-    end
-
-    # @return [String] renda formatada (values.re)
-    def re_nova_renda
-      re_proximos_dados
-      "('#{re_atual[:ct]}',#{ano},#{cnt},'#{re_atual_mv[:dl].strftime(DF)}',#{dias})"
-    end
-
-    # @return [Hash] dados contrato arrendamento (inclui lista movimentos novos)
-    def re_proximos_dados
-      # valor renda paga retirada do movimento
-      re_atual_mv[:vl] -= re_atual[:vr]
-      dre = cnt.zero? ? Date.new(ano, 1, 1) : Date.new(ano, cnt, 1) >> 1
-      re_atual.merge!(ano: dre.year, cnt: dre.month)
-    end
-
-    # apaga rendas da lista de contratos arrendamento
-    def re_delete_dml
-      dml("delete from #{BD}.re where ct in(#{str_lc})#{opcao[:t] ? '' : ' and cnt>0'}")
-      puts("RENDAS #{str_lc('')} APAGADAS #{bqnrs}")
-    end
-
-    # @return [Boolean] movimento com saldo suficiente?
-    def re_saldo_mv?
-      re_atual_mv[:vl] >= re_atual[:vr]
-    end
-
-    # @return [Hash] dados contrato arrendamento atual (inclui lista movimentos novos)
-    def re_atual
-      ctlct[ctpos]
-    end
-
-    # @return [Hash] movimento atual contrato arrendamento
-    def re_atual_mv
-      re_atual[:mv][mvpos]
-    end
-
-    # @return [Integer] ano da renda
-    def ano
-      re_atual[:ano]
-    end
-
-    # @return [Integer] numero da renda (0-12)
-    def cnt
-      re_atual[:cnt]
-    end
-
-    # @return [Integer] dias atraso/antecipo neste pagamento renda
-    def dias
-      re_atual_mv[:dl].mjd - (Date.new(ano, cnt, 1) >> (re_atual[:dc].month - 1)).mjd
-    end
-  end
-end

data/lib/abank/folha2.rb

@@ -1,79 +0,0 @@
-# frozen_string_literal: true
-
-module Abank
-  # acesso a folha calculo & base dados abank no bigquery
-  class Folha < Big
-    # @return [Boolean] linha folha calculo nao existe no bigquery?
-    def linha_naoexiste?
-      bqres.empty?
-    end
-
-    # @return [Boolean] linha folha calculo existe no bigquery?
-    def linha_existe?
-      bqres.count == 1 && bqres.first[:ds].strip == rowfc[2]
-    end
-
-    # @return [Boolean] linha folha calculo existe parecida no bigquery?
-    def linha_simila?
-      bqres.count == 1 && bqres.first[:ds].strip != rowfc[2]
-    end
-
-    # @return [String] texto base formatado para display
-    def linha_base
-      "#{rowfc[0].strftime(DF)} #{format('%<v3>-34.34s %<v4>8.2f', v3: rowfc[2], v4: rowfc[3])}"
-    end
-
-    # @return [String] texto linha existente formatada para display
-    def linha_existe
-      add_kys if opcao[:e]
-      "#{linha_base} EXIS #{format('%<v1>20d', v1: bqres.first[:ky])}"
-    end
-
-    # @return [String] texto linha similar formatada para display
-    def linha_similar
-      add_kys if opcao[:s]
-      "#{linha_base} SIMI #{format('%<v1>-20.20s', v1: bqres.first[:ds].strip)}"
-    end
-
-    # @return [String] texto linha existencia multipla formatada para display
-    def linha_multiplas
-      "#{linha_base} MULT(#{bqres.count})"
-    end
-
-    # obtem chaves movimento (keysin.mv) para apagar
-    def add_kys
-      bqres.each { |row| opcao[:k] += ",#{row[:ky]}" }
-    end
-
-    # @return [String] sql para movimentos no bigquery
-    def sql_existe_mv
-      "select *,#{ky_mv} as ky from #{BD}.mv where nc=#{conta} and dl='#{rowfc[0].strftime(DF)}' and vl=#{rowfc[3]}"
-    end
-
-    # obtem movimento (values.mv) para inserir
-    #
-    # @return [String] ' NOVO'
-    def values_mv
-      @mvvls += ",('#{rowfc[0].strftime(DF)}','#{dvc.strftime(DF)}','#{rowfc[2]}',#{rowfc[3]}"\
-                ",#{conta},#{dvc.year},#{dvc.month},'#{tpc}',#{ctc})"
-      ' NOVO'
-    end
-
-    # @return [Date] data valor corrigida
-    def dvc
-      dvl = opcao[:v]
-      dvl.empty? ? rowfc[1] : Date.parse(dvl)
-    end
-
-    # @return [String] classificacao do movimento (null --> classificacao automatica)
-    def ctc
-      cmv = opcao[:g]
-      cmv.empty? ? 'null' : "'#{cmv}'"
-    end
-
-    # @return [String] tipo movimento c[redito] ou d[ebito]
-    def tpc
-      rowfc[3].positive? ? 'c' : 'd'
-    end
-  end
-end