Migracja 110 mln wierszy z SQL Server do Elasticsearch

Cześć. Dziś postaram się opisać, jak zmigrowałem dosyć sporą ilość danych (110 mln wierszy) z SQL Servera do Elasticsearcha. Zacznijmy od konfiguracji ES. Użyłem do tego Kibany. Tworzymy index: PUT /nazwa-indexu Dla zwiększenia wydajności dodawania nowych dokumentów warto ustawić dwie zmienne: PUT /nazwa-indexu/_settings { “index”: { “refresh_interval”: “-1”, “number_of_replicas”: 0 Więcej…