Como ya te han dicho, manuales hay por todas partes, comenzando por el
manual oficial que puedes encontrar en el
sitio de la compañía.
MySql tiene una curva de aprendizaje muy suave y para comenzar basta que sepas los conceptos básicos de SQL en general (consultas SELECT, INSERT, UPDATE y DELETE). Los detalles específicos los podrás ir consultando en el manual o aquí mismo en estos foros.
Para la administración de tus bases yo te recomiendo
phpMyAdmin, que con todos sus bemoles (básicamente que se trata de una interfaz web), me sigue pareciendo lo mejor que hay para estos menesteres.
Además de un administrador, necesitarás componentes para la conexión desde Delphi. Para ello tienes varias opciones comenzando con dbExpress que ya viene incluído con Delphi (aunque yo sólo lo recomendaría en caso de que pretendas hacer aplicaciones que funcionen por igual en Windows y Linux) u ODBC, que sólo recomiendo en casos deseperados en los que requieras una aplicación que no dependa de la base de datos que uses.
Más recomendaría componentes como
ZEOS, que son gratuitas y tienen bastante reconocimiento además de que son óptimas en tanto que usan un acceso prácticamente directo a la librería cliente de MySql sin intermediarios como ODBC. El inconveniente que le veo es que me da la impresión de que es un proyecto en vías de extinción. Aún puedes bajar las componentes desde SourceForge pero la página principal del proyecto está inactiva desde marzo, según ellos porque ha sufrido continuos ataques pero aun desde antes llevaba mucho tiempo sin actualizarse. Aún así es una buena opción.
Otra álternativa son las componentes
MyDac de la compañía
Core Lab. Son de pago pero no se me hace un precio excesivo y me han funcionado muy bien, además de que contarás con el soporte de la compañía.
Cualquiera de las componentes que escojas te será fácil utilizarlas si ya tienes experiencia con el uso de componentes de acceso a bases de datos con Delphi.
// Saludos