$Id$


Aufgaben zur Umstellung des Schedulers von 8bit-Zeichen auf Unicode
-------------------------------------------------------------------



SCHEDULER AUF UTF-8 UMSTELLEN

- Weiterhin std::string benutzen

- Alle .cxx,.h,.odl-Quellen in UTF-8 umsetzen

- BSTR <--> string
  Alle BSTR aufsuchen, die nicht mit String_from_bstr() konvertiert werden
  Einige wenige werden vielleicht noch in einer Schleife (OLECHAR*)[] = (char*)[] konvertiert
  BSTR kommt an 1000 Programmstellen vor

- BSTR <--> Java
  Java modified UTF-8: '\0' -> 0xC0 0x80, Supplementary Characters als zwei mal drei byte lange UTF-8-Folgen (nicht 4 byte UTF-8)



SCHNITSTELLE ZUM BETRIEBSSYSTEM (ALLGEMEIN)

- Directory lesen, Dateityp Dir

- Scheduler: Verzeichnis�berwachung

- Scheduler: Windows-Dienste-Schnittstelle

- stdin, stdout, stderr: Einige Aufrufe von fwrite(), fprintf(stderr). 
  Zum Beispiel f�r die Antwort von scheduler -send-cmd=".."



SCHNITTSTELLE ZU WINDOWS
  
- Kommandozeile GetCommandLineW(), CommandLineToArgvW()?

- Dateinamen: CreateFileW() statt open(), wozu ist der Pr�fix "\\?\" ?


  
SCHNITTSTELLE ZU GNU  
  
- argv: Locale verwenden

- Dateinamen: Locale benutzen

- H�llroutine: system_from_utf8(), wcsrtombs() (Identit�t bei UTF-8)

- Zu UTF-8 unter Gnu: http://www.cl.cam.ac.uk/~mgk25/unicode.html

- utf8_mode = (strcmp(nl_langinfo(CODESET), "UTF-8") == 0)  
  
- Implementierung von wcwidth(): http://www.cl.cam.ac.uk/~mgk25/ucs/wcwidth.c
  
- Gnu: Im Hauptprogram Locale nach der Umgebung setzen: setlocale(LC_TYPE,""). Default ist sonst "C".
  printf("%ls", L"Sch�ne Gr��e") gibt den String dann korrekt codiert aus
  (dazu muss aber der Compiler den String korrekt erkennen: er muss die Codierung der Quelle kennen).
  
- Gnu: wcsrtombs() codiert ins eingestellte Locale,
  iconv_open() etc. (gibt's das auf f�r Windows?)
  


SCHNITTSTELLE ZU REGEX

- 3rd_party: regex (kann jetzt nur 7bit), andere Implementierung verwenden, vielleicht boost.



SCHNITTSTELLE ZU LIBXML und LIBXSLT

- 3rd_party: libxml-Dateizugriff (DTD und vielleicht Schema): Wie codieren libxml und libxslt die Dateinamen?

- libxml2, libxslt: Keine Konvertierung zu ISO-8859-1 mehr



SPIDERMONKEY

- Keine Konvertierung zu ISO-8859-1 mehr



SCHNITTSTELLE ZU PERL

- Perl: 5.8.1 verwenden (in 5.8.0 soll Unicode fehlerhaft implementiert sein)

- Wie Unicode �bergeben? UTF-8-String scheint eine Klasse zu sein, also kein normaler String mehr.



DATEIINHALTE

- string_from_file( dateiname, encoding ) oder binary_from_file() und utf8_from_file()

- Hostware-Dateien vermeiden

- Hostware-Log: openw() verwenden
  Am besten aus der Hostware rausnehmen und von iostream() befreien

- Dateiinhalt in UTF-8 oder einstellbar: <include encoding="utf-8">

- Protokolldateien immer in UTF-8

- stdout und stderr der Tasks, Subprozesse und <process> entsprechend dem Locale decodieren
  Ebenso subprocess.stdout, .stderr



DATENBANKEN

- Au�er Dateitypen odbc und jdbc: 
  SQL-Strings in UTF-8, werden aber vom Dateityp in Datenbank-Zeichencodierung umgesetzt
  
- Ebenso Clob-Zugriff

- ODBC und JDBC: set_parameter()

- HTTP-Schnittstelle: HTML in UTF-8



HOSTWARE (F�R DEN DATENBANKZUGRIFF)

- Hostole: File.get() sollte auch in Unicode erfolgen, oder nicht?
  Vielleicht: file.open( "-encoding=iso-8859-1 ..." )
  
- Any_file um UTF-8-Methoden erweitern: Any_file.get_line(), .put_line().  
  get() und put() bleiben bin�r. 
  Oder put_text/put_binary und get_text/get_binary

- [hostole] coding_scheme=old, falls eine Anwendung inkompatibel ist?

- Wenn Hostware Any_file UTF-8 verarbeitet, dann muss hostodbc angepasst werden?

- Bei der Gelegenheit von der Hostware entkoppeln. 
  Sos_option_iterator abkoppeln
  Nur f�r Datenbanken hostole einsetzen
  Hostole mit put_binary(), get_binary(), Binary_from_file()
  


C++

- wchar_t unter Gnu hat 32bit, ebenso vermutlich wstring.
  wchar_t unter Windows hat 16bit, umfasst also nicht die Supplementary Characters
  
- Strings sortieren (wo verwenden wir das?), 
  std::map<string,T> --> std::map<wstring,T> ?, ebenso set<>
  