[C++] charset-a

uporabi pretvorbo. Ko iz datoteke prebereš vrstico, jo pretvori v utf8 in jo potem zapiši v bazo.

v ruby-ju gre nekako takole

# encoding: UTF-8
 
vrstica.force_encoding("ISO-8859-1").encode("UTF-8")

v C++ u pa nekako takole

metoda to_utf8

#include < windows.h >
std::string to_utf8(const wchar_t* buffer, int len)
{
        int nChars = ::WideCharToMultiByte(
                CP_UTF8,
                0,
                buffer,
                len,
                NULL,
                0,
                NULL,
                NULL);
        if (nChars == 0) return "";

        string newbuffer;
        newbuffer.resize(nChars) ;
        ::WideCharToMultiByte(
                CP_UTF8,
                0,
                buffer,
                len,
                const_cast< char* >(newbuffer.c_str()),
                nChars,
                NULL,
                NULL); 

        return newbuffer;
}

std::string to_utf8(const std::wstring& str)
{
        return to_utf8(str.c_str(), (int)str.size());
}

še main

int main()
{
        std::ofstream testFile;

        testFile.open("demo.xml", std::ios::out | std::ios::binary); 

        std::wstring text =
                L"< ?xml version=\"1.0\" encoding=\"UTF-8\"? >\n"
                L"< root description=\"this is a na?ve example\" >\n< /root >";

        std::string outtext = to_utf8(text);

        testFile << outtext;

        testFile.close();

        return 0;
}

Ali pa metoda mysql_set_character_set...

Ni važno če je baza utf8, če vzpostaviš connection s charsetom npr win1250, se bodo vrednosti ob insertih in selectih samodejno pretvarjali
iz utf8 v win1250 in obratno... tako ne rabiš nobene zunanje knjižnjice...

Moraš pa malo pazit, da se podatki v bazo res zapišejo tako kot želiš...mysql je tu malo kompliciran in je treba premislit. Ima vsaj 3 različna mesta, kjer se (hote ali nehote) pretvorba dogaja. Najprej sama definicija baze (oz tabel)...če ta ni utf8, potem bo mysql pretvarjal v latin1 (ki je AFAIK še vedno default) pri vsakem vpisu ne glede kaj mu ti pošiljaš in kako nastaviš character set. Potem je charset povezave in klienta, ki se nastavlja z character set...če se te 3 vrednosti ujemajo, sam mysql pretvorbe ne bo delal, še vedno pa to ne pomeni da si v bazo dajal tisto kar si hotel. Ogromno baz sem videl, kjer je bilo vse default, latin1, klienti pa so veselo vpisovali utf8. Ker so (posamezni) utf8 znaki veljavne latin1 črke se baza ne bo nič pritožla....potem so pa res rabli utf8, se je pa pretvarjalo celo bazo...
Če imaš text res v cp1250, potem se potrudi in preveri da je to kar pristane v bazi res utf8, in ni važno kaj boš rabil ven, vedno se bo dalo dobiti.