Генераторы обеспечивают эффективный по памяти способ итерирования по большим наборам данных, производя значения по одному за раз (лениво) с помощью ключевого слова yield, вместо того чтобы сразу строить весь массив в памяти. Они идеальны для больших данных или потоковых данных.
{
= [];
( = ; < ; ++) { [] = ; }
;
}
{
( = ; < ; ++) {
;
}
}
(() ) {
();
}
yield делает функцию генератором: она производит значения лениво, по одному за итерацию, сохраняя своё состояние между ними — поэтому память остаётся постоянной независимо от того, сколько значений она производит.
function readLines(string $file): Generator {
$handle = fopen($file, 'r');
while (($line = fgets($handle)) !== false) {
yield $line; // yield one line at a time — never load the whole file
}
fclose($handle);
}
foreach (readLines('huge-10gb.csv') as $line) { // processes a 10GB file with tiny memory
process($line);
}
Чтение огромного файла строка за строкой с помощью генератора использует постоянный объём памяти — невозможно с file() (которая загружает весь файл в массив).
function fetchRows(PDOStatement $stmt): Generator {
while ($row = $stmt->fetch()) {
yield $row['id'] => $row; // yield key => value, streaming DB rows
}
}
Генераторы отлично подходят для потоковой передачи результатов базы данных — обработка строк по одной вместо загрузки огромного набора результатов в память.
Генераторы — важная функция PHP для эффективной по памяти обработки больших наборов данных — и их понимание ценно для создания приложений, работающих с данными в масштабе без исчерпания памяти.
Основная проблема, которую они решают, заключается в том, что создание полного массива больших данных (миллионы записей, строки огромного файла, большой результат запроса базы данных) может потребить огромное количество памяти и привести к краху приложения, тогда как генераторы производят значения лениво, по одному за раз, сохраняя память постоянной независимо от размера набора данных.
Наиболее практичные варианты использования распространены: чтение больших файлов строка за строкой (обработка многогигабайтного CSV или журнала с минимальной памятью, невозможно с функциями, которые всё загружают), потоковая передача результатов базы данных (обработка больших результатов запроса строка за строкой) и обработка больших или даже бесконечных последовательностей.
Понимание yield, ленивого вычисления и того, когда использовать генераторы (в любой момент, когда вы в противном случае строили бы большой массив в памяти), позволяет писать масштабируемый код обработки данных, который грациозно работает с большими объёмами — частая реальная потребность в пакетных задачах, импорте/экспорте, генерации отчётов и конвейерах данных.
Хотя генераторы не требуются для малых наборов данных, они являются необходимыми знаниями для PHP, учитывающего память и обрабатывающего большие объёмы данных, различая разработчиков, которые могут писать масштабируемый код обработки данных, от тех, чьи приложения падают или замедляются при больших нагрузках, что делает их ценным знанием уровня senior для чувствительных к производительности, ориентированных на данные приложений PHP.