Termin, którego szukasz, to „paginacja”. Niestety, w zależności od silnika SQL odbywa się to inaczej.
W przypadku MS SQL Server zobacz ten Pytanie o przepełnienie stosu .
Skoro wspomniałeś o MySQL, jest to całkiem proste:
SELECT [columns] FROM [a table] LIMIT 10000
SELECT [columns] FROM [a table] LIMIT 10000 OFFSET 10000
Pierwsze stwierdzenie pobiera wyniki 1-10000, a drugie 10,001-20 000.