Java for BigData - История изменений

Afonbro: /* Перечень рецептов */

2026-04-06T20:32:19Z

Перечень рецептов

← Предыдущая версия		Версия от 23:32, 6 апреля 2026
Строка 9:		Строка 9:

	== Перечень рецептов ==		== Перечень рецептов ==
			==== Потоковое чтение больших файлов (JDBC ResultSet) ====
			Обрабатывает миллионы записей из БД без переполнения памяти (OutOfMemoryError)..

			<syntaxhighlight lang="java">
			// public void readLargeDataset() {
			String url = "jdbc:postgresql://localhost:5432/bigdata";
			try (Connection conn = DriverManager.getConnection(url, "user", "pass")) {
			conn.setAutoCommit(false);
			Statement stmt = conn.createStatement(ResultSet.TYPE_FORWARD_ONLY, ResultSet.CONCUR_READ_ONLY);
			stmt.setFetchSize(1000);
			ResultSet rs = stmt.executeQuery("SELECT * FROM large_table");
			while (rs.next()) {
			processRow(rs);
			}
			} catch (SQLException e) { e.printStackTrace(); }
			}
			</syntaxhighlight>

			==== Параллельная обработка с Java Stream API ====
			Быстро фильтрует и агрегирует большие наборы данных, задействуя все ядра процессора

			<syntaxhighlight lang="java">
			// List<Integer> numbers = new ArrayList<>();
			for (int i = 0; i < 10_000_000; i++) numbers.add(i);

			long start = System.nanoTime();
			long sum = numbers.parallelStream() // параллельный поток
			.mapToLong(i -> (long) i * i) // возводим в квадрат
			.sum();
			System.out.println("Сумма квадратов: " + sum + ", время: " + (System.nanoTime() - start) + " нс");
			</syntaxhighlight>

Patarakin в 13:48, 15 февраля 2026

2026-02-15T13:48:02Z

← Предыдущая версия		Версия от 16:48, 15 февраля 2026
Строка 6:		Строка 6:
	\|Environment=Java		\|Environment=Java
	}}		}}
	=== Перечень рецептов ==

			== Перечень рецептов ==

Patarakin: Новая страница: «{{Scripting Tutorials |Description=Как использовать Java для обработки больших данных? Перечень рецептов |Field_of_knowledge=Информатика, Интернет вещей, Большие данные |FieldActivity=Computational Thinker |Возрастная категория=14 |Environment=Java }} === Перечень рецептов ==»

2026-02-15T13:47:45Z

Новая страница: «{{Scripting Tutorials |Description=Как использовать Java для обработки больших данных? Перечень рецептов |Field_of_knowledge=Информатика, Интернет вещей, Большие данные |FieldActivity=Computational Thinker |Возрастная категория=14 |Environment=Java }} === Перечень рецептов ==»

Новая страница

{{Scripting Tutorials
|Description=Как использовать Java для обработки больших данных? Перечень рецептов
|Field_of_knowledge=Информатика, Интернет вещей, Большие данные
|FieldActivity=Computational Thinker
|Возрастная категория=14
|Environment=Java
}}
=== Перечень рецептов ==