Skip to content

Conversation

@eprusakov
Copy link

No description provided.

Прусаков Евгений Германович added 2 commits March 11, 2025 20:19
gem 'slim-rails'

# Serializers
gem 'jbuilder'
Copy link
Collaborator

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

Традиционно выбрал бы вместо jbuilder, что-то по-шустрее: он когда разрастется и обрастет логикой, его потом трудно заменять. Но про это уже писал в первом задании

config/environments/*.local.yml

# IDE files
/.idea/*
Copy link
Collaborator

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

Отлично!

INDEX_CONCURRENT_PROCESSES=

MONGO_HOST=mongo
MONGO_PORT=27017
Copy link
Collaborator

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

Отлично! Не забыли добавить переменные окружения в .sample.env (вы единственный кто это сделал )))

gem 'devise'

# Паджинация
gem 'kaminari-mongoid'
Copy link
Collaborator

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

Отлично!

field :published_at, type: Date
field :insno, type: String
field :folder_id, type: String
field :language_id, type: String
Copy link
Collaborator

@igorsimdyanov igorsimdyanov Mar 12, 2025

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

Отлично! Скрупулезно перечислены атрибуты

@@ -0,0 +1,19 @@
module Mongo
class BookMongo
Copy link
Collaborator

@igorsimdyanov igorsimdyanov Mar 12, 2025

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

Если модель вызывать где-то в коде, то получается не очень красиво: Mongo::BookMongo - два раза Mongo. И вообще лучше как-то переименовать, чтобы в названии не было отсылки к MongoDB. Вдруг потом захотим сменить базу данных на ElasticSearch а название уже расползется по всему проекту. Это конечно, не большая проблема с современными IDE, но все-равно лучше какое-нибудь бизнесовое название BookSource или Documents::Book. Потом копипастой эта Mongo расползется по всем моделям, и каждая модель будет "кричать" что она от MongoDB, вместо того, чтобы "кричать" о своем бизнес-назначении или домене. Это не проблема в маленьком приложении, но если моделей 100 и все они говорят, что они работают с MongoDB - это утомляет, хочется узнать, а чем эти 100 моделей друг от друга отличаются.

username: <%= ENV.fetch('POSTGRES_USER') { 'igorsimdyanov' } %>
password: <%= ENV.fetch('POSTGRES_PASSWORD') { '' } %>
username: <%= ENV.fetch('POSTGRES_USER') { 'postgres' } %>
password: <%= ENV.fetch('postgres') { '' } %>
Copy link
Collaborator

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

Тут явно опечатка, если потом захотите сменить пароль - будут проблемы. Писал об этом в первом мердж-реквесте, но понимаю, что не успели поправить (почти одновременно отправили).


test:
<<: *default
<<: *postgre
Copy link
Collaborator

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

Очень хорошо!

ports:
- "27017:27017"
volumes:
- mongo_data:/data/db
Copy link
Collaborator

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

Отлично, что модифицировали docker-compose.yml.

# Получаем все книги из PostgreSQL
books = pg_connection.execute("SELECT * FROM books")

books.each do |book|
Copy link
Collaborator

Choose a reason for hiding this comment

The reason will be displayed to describe this comment to others. Learn more.

Лучше все-таки воспользоваться batch-вариантом переноса данных, т.е. переносить кусочками по 1 000 или 10 000 книг. Иначе вы сначала выгружаете гигантский массив моделей в оперативную память и лишь потом начинаете книгу за книгой переносить в Mongo. Все это время память занята, а вам ведь все 800 000 книг в памяти на не требуются. Причем в ActiveRecord даже такая возможность уже есть https://api.rubyonrails.org/classes/ActiveRecord/Batches.html

Books.in_batches do |book|
  ...
end

Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

2 participants