Termín, který hledáte, je „stránkování“. Bohužel se to dělá jinak v závislosti na SQL enginu.
Pro MS SQL Server viz tento Otázka přetečení zásobníku .
Protože jste zmínil MySQL, je to vlastně docela jednoduché:
SELECT [columns] FROM [a table] LIMIT 10000
SELECT [columns] FROM [a table] LIMIT 10000 OFFSET 10000
První příkaz načte výsledky 1-10 000 a druhý příkaz načte výsledky 10 001-20 000.