Difference between revisions of "Character encoding"

From PostgreSQL_wiki
Jump to: navigation, search
(Character encoding van een bestand)
Line 4: Line 4:
 
Hierdoor moeten we vandaag de dag systemen op elkaar aansluiten die historisch gezien met verschillende character encodings werken, waardoor telkens verwaaring en de noodzaak tot conversie bestaat. De beste benadering is om alles op een enkele standaard te standaardiseren, bijvoorbeeld UTF-8.
 
Hierdoor moeten we vandaag de dag systemen op elkaar aansluiten die historisch gezien met verschillende character encodings werken, waardoor telkens verwaaring en de noodzaak tot conversie bestaat. De beste benadering is om alles op een enkele standaard te standaardiseren, bijvoorbeeld UTF-8.
 
= Character encoding van een bestand =
 
= Character encoding van een bestand =
Onder Linunx stel je de character encoding van een bestand vast met het commando:
+
Onder Linunx heb je verschillende character encoding commando's voor bestanden:
  +
* file
  +
* enca
  +
* iconv
 
<pre>
 
<pre>
file bestandsnaam.txt
+
martin@host:~$ file bestandsnaam.txt
enca -L bestandsnaam.txt
+
bestandsnaam.txt: HTML document text, ISO-8859 text
  +
martin@host:~$ enca -L bestandsnaam.txt
 
  +
transformation format 8 bits; CP1251
en enca
 
  +
</pre>
  +
Met het commando iconv zet je een bestand om van de ene character encoding naar de andere, bijvoorbeeld:
  +
iconv -f ISO8859-15 -t UTF-8 bestandsnaam.txt -o bestandsnaam-utf-8.txt
  +
maakt van een bestand met ISO8859 character encoding een bestand met UTF-8 encoding aan.
 
= checks 1 =
 
= checks 1 =
 
So if I compile this, we can check.
 
So if I compile this, we can check.
Line 25: Line 32:
 
return enc; } }
 
return enc; } }
 
</pre>
 
</pre>
  +
 
= check 2 =
 
= check 2 =
 
<pre>
 
<pre>

Revision as of 08:47, 24 October 2012

Character encoding levert bij de uitwisseling tussen verschillende systemen problemen op. Linux, AIX en Sun Solaris gedragen zich anders.

Geschiedenis

Het probleem van vandaag is dat er pas laat een goede bruikbare open standaard is gekomen: http://en.wikipedia.org/wiki/UTF-8
Hierdoor moeten we vandaag de dag systemen op elkaar aansluiten die historisch gezien met verschillende character encodings werken, waardoor telkens verwaaring en de noodzaak tot conversie bestaat. De beste benadering is om alles op een enkele standaard te standaardiseren, bijvoorbeeld UTF-8.

Character encoding van een bestand

Onder Linunx heb je verschillende character encoding commando's voor bestanden:

  • file
  • enca
  • iconv
martin@host:~$ file bestandsnaam.txt
bestandsnaam.txt: HTML document text, ISO-8859 text
martin@host:~$ enca -L bestandsnaam.txt
transformation format 8 bits; CP1251

Met het commando iconv zet je een bestand om van de ene character encoding naar de andere, bijvoorbeeld:

iconv -f ISO8859-15 -t UTF-8 bestandsnaam.txt -o bestandsnaam-utf-8.txt

maakt van een bestand met ISO8859 character encoding een bestand met UTF-8 encoding aan.

checks 1

So if I compile this, we can check.

public class CharSetTest 
{      public static void main(String[] args) 
  {         System.out.println("Default Charset=" + Charset.defaultCharset());
            System.setProperty("file.encoding", "Latin-1");
            System.out.println("file.encoding=" + System.getProperty("file.encoding"));
            System.out.println("Default Charset=" + Charset.defaultCharset());
            System.out.println("Default Charset in Use=" + getDefaultCharSet());     }
       private static String getDefaultCharSet()
  {         OutputStreamWriter writer = new OutputStreamWriter(new ByteArrayOutputStream());
            String enc = writer.getEncoding();
            return enc;     } } 

check 2

try this simple program 
import java.io.FileWriter;
import java.io.IOException;
public class Test {
      public static void main(String args[]) throws IOException {
            FileWriter filewrt = new FileWriter("out");
            String defaultcharset = filewrt.getEncoding();
            filewrt.close();
            System.out.println("Default encoding is :" + defaultcharset);
      }
}

check 3

import java.io.FileWriter;
import java.io.IOException;
import java.util.Locale;
public class Test {
      public static void main(String args[]) throws IOException {
            FileWriter filewrt = new FileWriter("out");
            String defaultcharset = filewrt.getEncoding();
            filewrt.close();
            System.out.println("Default encoding is :" + defaultcharset);
            Locale locale = Locale.getDefault();
            System.out.println(locale);
      }
}

check 4

this is teh program that i run on test
import java.io.BufferedWriter;
import java.io.FileWriter;
public class FileWrite {
      public static void main(String args[]) {
            try {
                  // Create file
                  FileWriter fstream = new FileWriter("out.txt");
                  BufferedWriter out = new BufferedWriter(fstream);
                  out.write("Damásio Pinto Do Carmo");
                  // Close the output stream
                  out.close();
            } catch (Exception e) {// Catch exception if any
                  System.err.println("Error: " + e.getMessage());
            }
      }
}