Vor der Einführung allgemeiner Tabellenausdrücke in MySQL 8 war die erste Methode von GL die schnellste, aber hier sind ein paar andere Ideen (auch mit älterer Technologie), nur zum Spaß ...
1.
SELECT x.*
, COUNT(*) rank
FROM my_table x
JOIN my_table y
ON y.a = x.a
AND y.b <= x.b
GROUP
BY x.a
, x.b;
2.
SELECT x.*
, FIND_IN_SET(b,n) rank
FROM my_table x
JOIN
( SELECT a
, GROUP_CONCAT(b ORDER BY b) n
FROM my_table
GROUP
BY a
) y
ON y.a = x.a;