csv_generator_reader 0.1

checksums.yaml

@@ -0,0 +1,7 @@
+---
+SHA256:
+  metadata.gz: 78631b6ca32c31432b82a4930770ceab52ff6f10e2eb590d1eac70993a69c897
+  data.tar.gz: 6e925b753f417c2871b6ac0e04f1373bf54c1cc785b4c6203fa9905bb6f46c8a
+SHA512:
+  metadata.gz: b93e760d19c9a776278eaabd8a67a79c8412328a3e7089333365cc1de225f05a6cbe32b0627e9d73397548fcb0fd49bc3824ff577f6c95731cf8aa5c4df8ae03
+  data.tar.gz: 68c045f61e3fee9e1f2a6e2b4730c225ab0a361af720bfd19a79f28ae7b65d7d7fd9f9858ddc82c8cd4d80a04edb042fef00946e592cab172011402dc51328f8

data/lib/Libro.rb

@@ -0,0 +1,9 @@
+class Libro
+  attr_accessor :date, :isbn, :price
+
+  def initialize(date, isbn, price)
+    @date = date
+    @isbn = isbn
+    @price = Float(price)
+  end
+end

data/lib/csv_generator.rb

@@ -0,0 +1,54 @@
+require 'csv'
+require_relative 'Libro'
+require_relative 'helpers' # benchmark
+
+class Generador
+  attr_accessor :nombre_archivo, :cantidad
+
+  def initialize(nombre, cantidad)
+    @nombre_archivo = nombre
+    @cantidad = cantidad
+  end
+
+  def isbn_gen
+    "#{rand.to_s[2..4]}-#{rand.to_s[2..2]}-#{rand.to_s[2..8]}-#{rand.to_s[2..2]}-#{rand.to_s[2..2]}"
+  end
+
+  def date_gen
+    from = 0.0
+    to = Time.now
+    Time.at(from + rand * (to.to_f - from.to_f)).strftime('%d/%m/%Y')
+  end
+
+  def price_gen
+    rand(0.0..99.99).truncate(2)
+  end
+
+  def file_gen
+    CSV.open(@nombre_archivo, 'w+', headers:['Date', 'ISBN', 'Amount'], write_headers: true) do |archivo|
+      (@cantidad * 1_000_000).times do
+        archivo << [date_gen.to_s, isbn_gen.to_s, price_gen]
+      end
+    end
+  end
+end
+
+archivo = ARGV[1]
+cantidad = ARGV[0].to_i
+nuevo_archivo = Generador.new(archivo, cantidad)
+
+if cantidad
+  if /^.*\.csv/.match(archivo)
+    print_memory_usage do
+      print_time_spent do
+        puts "Generando archivo #{archivo} con #{cantidad} millones de registros"
+        nuevo_archivo.file_gen
+        puts 'COMPLETADO'
+      end
+    end
+  else
+    puts "ERROR SINTAXIS #{archivo}: ruby cvs_generator [cant * 1M] [nombre_de_archivo.csv]"
+  end
+else
+  puts "ERROR SINTAXIS cantidad: #{cantidad}: ruby cvs_generator [cant * 1M] [nombre_de_archivo.csv]"
+end

data/lib/csv_reader.rb

@@ -0,0 +1,32 @@
+require 'csv'
+require_relative 'Libro'
+
+class Archivo
+  attr_accessor :archivo
+
+  def initialize(csv_file_name)
+    @libro_del_archivo = Enumerator.new do |y|
+      archivo = CSV.foreach(csv_file_name, headers: true).each
+      loop do
+        row = archivo.next
+        y << Libro.new(row[0], row[1], row[2])
+      end
+    end
+  end
+
+  def total_value_in_stock
+    sum = 0.0
+    loop do
+      sum += @libro_del_archivo.next.price
+    end
+    sum.truncate(2)
+  end
+
+  def cant_repetidos
+    repeticiones = Hash.new(0)
+    loop do
+      repeticiones[@libro_del_archivo.next.isbn] += 1
+    end
+    repeticiones
+  end
+end

data/lib/helpers.rb

@@ -0,0 +1,17 @@
+require 'benchmark'
+
+def print_memory_usage
+  memory_before = `ps -o rss= -p #{Process.pid}`.to_i
+  yield
+  memory_after = `ps -o rss= -p #{Process.pid}`.to_i
+
+  puts "Memoria: #{((memory_after - memory_before) / 1024.0).round(2)} MB"
+end
+
+def print_time_spent
+  time = Benchmark.realtime do
+    yield
+  end
+
+  puts "Tiempo: #{time.round(2)}"
+end

data/lib/stock_stats.rb

@@ -0,0 +1,16 @@
+require 'csv'
+require_relative 'csv_reader'
+require_relative 'Libro'
+require_relative 'helpers' # benchmark
+
+archivo = ARGV[0]
+reader = Archivo.new(archivo)
+puts "Processing #{archivo}"
+print_memory_usage do
+  print_time_spent do
+    puts "Total value = #{reader.total_value_in_stock}"
+    # cant_repetidos deshabilitado ya que se utiliza un archivo generado que dificilmente tenga repetidos
+    # puts reader.cant_repetidos
+  end
+end
+

metadata

@@ -0,0 +1,50 @@
+--- !ruby/object:Gem::Specification
+name: csv_generator_reader
+version: !ruby/object:Gem::Version
+  version: '0.1'
+platform: ruby
+authors:
+- Sebastian Perez Adan
+autorequire: 
+bindir: bin
+cert_chain: []
+date: 2022-05-12 00:00:00.000000000 Z
+dependencies: []
+description: csv_generator takes as input parameters the number of file entries in
+  millions and the name of the file to generate. csv_reader takes input files generated
+  with csv_generator
+email:
+- sebapa@gmail.com
+executables: []
+extensions: []
+extra_rdoc_files: []
+files:
+- lib/Libro.rb
+- lib/csv_generator.rb
+- lib/csv_reader.rb
+- lib/helpers.rb
+- lib/stock_stats.rb
+homepage: https://github.com/sebapa/csv_reader
+licenses:
+- GPL-3.0
+metadata: {}
+post_install_message: 
+rdoc_options: []
+require_paths:
+- lib
+required_ruby_version: !ruby/object:Gem::Requirement
+  requirements:
+  - - ">="
+    - !ruby/object:Gem::Version
+      version: '0'
+required_rubygems_version: !ruby/object:Gem::Requirement
+  requirements:
+  - - ">="
+    - !ruby/object:Gem::Version
+      version: '0'
+requirements: []
+rubygems_version: 3.3.13
+signing_key: 
+specification_version: 4
+summary: CSV file generator and reader of the generated files
+test_files: []