http://www.mysql.ru/docs/pautov/c_api.htm

Для Win в самом сервере идет dll и заголовочные файлы насколько я знаю. А как использовать dll-ки почитай например тут http://www.helloworld.ru/texts/comp/lang/delphi/dll/index.htm