1. Unicode ¶
In computing, Unicode provides an international standard which has the goal of providing the means to encode the text of every document people want to store on computers. This includes all scripts in active use today, many scripts known only by scholars, and symbols which do not strictly represent scripts, like mathematical, linguistic and APL symbols. Establishing Unicode involves an ambitious project to replace existing character sets, many of them limited in size and problematic in multilingual environments. Despite technical problems and limitations, Unicode has become the most complete character set and one of the largest, and seems set to serve as the dominant encoding scheme in the internationalization of software and in multilingual environments. Many recent technologies, such as XML, the Java programming language as well as several operating systems, have adopted Unicode as an underlying scheme to represent text. '''from wikipedia.org'''
2. document ¶
official consortium : http://www.unicode.org
introduction : http://www.unicode.org/standard/translations/korean.html
specification : http://www.unicode.org/versions/Unicode4.1.0/
http://pluu.pe.kr/pukiwiki/
introduction : http://www.unicode.org/standard/translations/korean.html
specification : http://www.unicode.org/versions/Unicode4.1.0/
http://pluu.pe.kr/pukiwiki/
3. thread ¶
요즘 관심있는 것중 하나.
현재 대부분ì�˜ 리눅스 어플리 ì¼€ì�´ì…˜ì�€ UTF-8ì�„ 기반으로해서 개발ë�˜ê³ 있거나 í�¬íŒ…중ì�´ë‹¤. 새로 만들어지는 ëª¨ë“ íŒ¨í‚¤ì§€ëŠ” 모ë‘� UTF-8ì�„ 사용한다. 그놈, KDE 와같ì�€ 윈ë�„ìš° ë§¤ë‹ˆì €ë“¤ë�„ 기존ì�˜ EUC를 기반으로한 문ìž�ì…‹ì�„ ì§€ì›�하지만, 표면ì �으로만 ì§€ì›�í• ë¿� ë‚´ë¶€ì �으로는 UTF-8로 변환하여서 처리함. ê²°êµ UTF-8로ì�˜ 문ìž�ì…‹ 변경ì�€ 기간ì�˜ ë¬¸ì œì�´ì§€ 대세ì�´ë‹¤.
MultiLinugual 플랫�� 지향하는 프로그램� 개발��면 당연히 �해해야하는 파트임. - eternalbleu
현재 대부분ì�˜ 리눅스 어플리 ì¼€ì�´ì…˜ì�€ UTF-8ì�„ 기반으로해서 개발ë�˜ê³ 있거나 í�¬íŒ…중ì�´ë‹¤. 새로 만들어지는 ëª¨ë“ íŒ¨í‚¤ì§€ëŠ” 모ë‘� UTF-8ì�„ 사용한다. 그놈, KDE 와같ì�€ 윈ë�„ìš° ë§¤ë‹ˆì €ë“¤ë�„ 기존ì�˜ EUC를 기반으로한 문ìž�ì…‹ì�„ ì§€ì›�하지만, 표면ì �으로만 ì§€ì›�í• ë¿� ë‚´ë¶€ì �으로는 UTF-8로 변환하여서 처리함. ê²°êµ UTF-8로ì�˜ 문ìž�ì…‹ 변경ì�€ 기간ì�˜ ë¬¸ì œì�´ì§€ 대세ì�´ë‹¤.
MultiLinugual 플랫�� 지향하는 프로그램� 개발��면 당연히 �해해야하는 파트임. - eternalbleu
4. ê´€ë ¨ 글 ¶
UNICODE : http://www.unicode.org/standard/translations/korean.html ìœ ë‹ˆì½”ë“œì—� 대해 ? ì–´ë–¤ 플랫í�¼, ì–´ë–¤ 프로그램, ì–´ë–¤ 언어ì—�ë�„ ìƒ�관없ì�´ ìœ ë‹ˆì½”ë“œëŠ” ëª¨ë“ ë¬¸ìž�ì—� 대해 ê³ ìœ ë²ˆí˜¸ë¥¼ ì œê³µí•©ë‹ˆë‹¤. UCS-2 : 대부분ì�˜ í�”히 쓰는 문ìž�들ì�„ ì •ì�˜í•œ 규격입니다. 2bytes 범위ë�¼ì„œ UCS-2 입니다. ì�´ê±¸ bit 로 표현하여 UTF-16 입니다. UTF-16LE, UTF-16BE ê°€ ë�™ì�¼í•œ 규격으로 Little Endian, Big Endian ì�€ 단지 byte order (ë°”ì�´íЏ 순서)ê°€ 다를ë¿� 입니다. iconv --list 를 í•´ë³´ë©´ 쓸ë�°ì—†ì�´ ë§Žì�´ 나오는ë�°, UTF-16LE, UCS-2LE ê°€ ê°™ì�€ê±°ê³ BE ë�¼ë¦¬ ê°™ì�€ê±°ë�¼ê³ ë³´ë©´ ë�©ë‹ˆë‹¤. 그냥 UTF-16ì�€ UTF-16LE 와 ë�™ì�¼í•˜ë‚˜ 앞ì—� BOM í—¤ë�”ê°€ 붙습니다. UCS-2 는 í—¤ë�”ê°€ 붙지 않습니다. UCS-4 : UCS-2 ì�˜ 확장입니다. ë’¤ì�˜ 2bytes 는 UCS-2 와 ì™„ì „ížˆ 호환ë�©ë‹ˆë‹¤. 즉, UCS-2 ì�˜ 0xFFFF 는 UCS-4 ì�˜ 0x0000FFFF 와 ê°™ì�€ 코드입니다. UTF-32 로 ë§�ë§Œ 바꾸어 위ì�˜ 내용과 ë�™ì�¼í•©ë‹ˆë‹¤. ì�¸í„°ë„· 브ë�¼ìš°ì € ë‚´ë¶€ì—�서 ì�´ê²ƒì�´ 사용ë�˜ë©°, js 등ì—�서 indexOf() 로 ê°€ì ¸ì˜¤ë©´ UCS-4 코드가 10진수로 반환ë�©ë‹ˆë‹¤. 10진수 ì�´ë¯€ë¡œ 65535 까지는 UCS-2 와 ì™„ì „ 호환 ë�©ë‹ˆë‹¤. UTF-8 : UCS-2, UCS-4 는 ì˜�ì–´ê¶Œì—�서는 분명한 ë‚비가 있습니다. ascii 만으로ë�„ 충분히 표현 가능한ë�°, 한글ìž�ì—� ì“°ì§€ë�„ 않는 ë°”ì�´íŠ¸ê°€ ë‚비ë�˜ì§€ìš”. 그런ì �ë�„ ìžˆê³ , 문ìž�열로 ë˜ í•˜ê¸°ì—� UTF-7 보다는 편리해서 가장 보편ì �으로 사용ë�©ë‹ˆë‹¤. 가변길ì�´ë¥¼ 가지는 특징ì�´ 있습니다. 단지 계산만으로 UCS-2, UCS-4 규격으로ì�˜ ìƒ�호변환ì�´ 가능합니다. 한êµì–´ëŠ” UCS-2 규격 ë‚´ì—� 있기 때문ì—� 3bytes ë‚´ì—�서 표현 가능합니다. UTF-7 : ì�´ë©”ì�¼ 등 ascii 만으로 표현해야 í• í•„ìš”ì„±ì—� ì�˜í•´ 만들어졌습니다. 한 글ìž�당 8bit 씩 í• ë‹¹í•˜ì§€ë§Œ 사용ì�€ 7bit ë§Œ 합니다. UTF-8 ê³¼ ê°™ì�€ 특징ì�„ ê°€ì§€ê³ ìžˆìœ¼ë‚˜, ëª¨ë“ ascii ê°’ì�´ ì‹¤ì œ ascii 와 ê°™ì�€ ì�˜ë¯¸ê°€ 아니기 때문ì—� ì�´ê²ƒìœ¼ë¡œ 무엇ì�„ 하기는 좀 힘ë“니다. BOM (Byte Order Mark) : ìœ ë‹ˆì½”ë“œ 종류가 많기 때문ì—� 앞ì—� ì�´ëŸ° í—¤ë�”를 붙여서 구분하기ë�„ 합니다. EmEditor, UltraEdit, Vim 등ì�˜ ì—�디터ì—�서 ì�¸ì‹�합니다. 코드표 http://www.unicode.org/charts/ ê°� 나ë�¼ë³„ 코드범위와 ì •ì�˜ë�œ 문ìž�를 ë³¼ 수 있습니다. 앞ì—� 0 ì�„ ì �ì§€ 않았기 때문ì—� (Zerofill ì�´ 아니기 때문ì—�) 4ìž�리까지는 UCS-2 ë ¤ë‹ˆ í•˜ì‹œê³ , 5 ìž�리 부터는 UCS-4 ë ¤ë‹ˆ 하ì‹ì‹œì˜¤. resy 우리ë§�로 ë�œ ìœ ë‹ˆì½”ë“œ íŠœí† ë¦¬ì–¼ì�´ 있었으면 ì¢‹ê² ë‹¤ 했는ë�°.. ì�´ëŸ° ìž�료ë�¼ë�„ ì°¸ ì ˆì‹¤í•˜êµ°ìš”. ì•„ì§�ë�„ ìœ ë‹ˆì½”ë“œ = UTF-16(or 다른 ì�¸ì½”딩) 으로 ì°©ê°�하는 사람ì�´ ë§Žì�€ 현실ì—�... 누군가 ì´�대를 매긴 해야하는ë�°... ê±°ì°¸... ^^: 07/13 2:23:12 코멘트 지우기 resy ë³´ì¶© 내용으로... UCS 는 코드값ì�˜ í…Œì�´ë¸”ì�´ë�¼ê³ ìƒ�ê°�하면 ë�©ë‹ˆë‹¤. UTF 는 ì�¸ì½”딩ì�˜ 방법(즉, ë°”ì�´íЏì�˜ ì—°ì†�ë�œ 순서를 어떻게 í‘œí˜„í• ê²ƒì�´ëƒ� 하는 ì •ì�˜)ì�´ê³ , UCS 는 미리 ì •ì�˜ë�˜ì–´ 있는 ê°� 글ìž� 코드를 í…Œì�´ë¸” í™” 해놓ì�€ 것입니다. ê°€ë ¹ 글ìž� 'ê°€' 는 ìœ ë‹ˆì½”ë“œì—�서 U+AC00 ì—� 해당하는ë�°, UCS2 ì—�서는 0xAC00 í…Œì�´ë¸” 좌표ì—� ìœ„ì¹˜í•˜ê³ ìžˆìŠµë‹ˆë‹¤. ì�´ê²ƒì�„ UTF-8 ì�¸ì½”딩하면, 0xEAB080 ì�´ ë�©ë‹ˆë‹¤. 누구ë�„ ì�´ëŸ° ì‹�으로 설명해주는 사람ì�´ 없어서 ì˜ˆì „ì—” UCS2 = UTF16?? ì�´ë�¼ê³ í—·ê°ˆë¦¬ê³ í—¤ë§¸ëŠ”ë�°, ì�´ê²Œ ì •í™•í•œ 설명ì�¸ì§€ ëª¨ë¥´ê² ìŠµë‹ˆë‹¤. 잘못ë�œ ì �ì�´ 있으면 누가 ì§€ì �해주시길... ^^; 문ìž� ì§‘í•©(Character Set)ì�´ëž‘ ì�¸ì½”딩(Encoding)ì—� 대한 ì°¨ì�´ë�„ ë� ì†�시ì›�히 가르ì³�주는 ë�°ê°€ ì—†ë�”êµ°ìš”. ê²°êµ ì‹œê°„ì�´ 지나다보니 스스로 알게 ë�˜ì—ˆìŠµë‹ˆë‹¤ë§Œ.. 확실히 ì™¸êµ ìž�료 빼면 êµë‚´ëŠ” -_-; ê·¸ëŸ¬ê³ ë³´ë‹ˆ ì˜ˆì „ì—� 누군가가 êµê°€ 코드표와 ì�¸ì½”딩ì�´ 가지는 ì�˜ë¯¸ì—� 대해 글 ì˜¬ë ¸ë�˜ ê±° ê°™ì�€ë�°, locale ì—� 대한 ë‚´ìš©ì�´ ê·¸ 후로 안올ë�¼ì˜¤ëŠ” ê±° 같기ë�„... 07/13 5:19:40 코멘트 지우기 utf utf -8ì�˜ 목ì �ì�´ ì• ë§¤í•˜ë„¤ìš”. ì›�래 목ì �ì�´ ascii문ìž�ë§Œ 있는 경우 사용하지 않는 첫번째 ë°”ì�´íŠ¸ë¥¼ ì—†ì• ê¸° 위한게 아닙니다. 개발 ê³¼ì •ì—�서 ascii 문ìž�와 호환ì�„ 위해 ê·¸ ì˜�ì—ì�„ 그대로 변환ì�´ ë�˜ë�„ë¡� 한 것입니다. 목ì � ìž�체는 ucs ìº�ë¦í„°ê°€ 2 ë˜�는 4ë°”ì�´íŠ¸ë¡œ ì�´ë£¨ì–´ì ¸ 있는ë�° ì�´ê±¸ 스트ë§�으로 ì‰ ì�´ì–´ë†“ê³ ë³´ë©´ 중간ì—� ë„�(0x00)ì�´ 들어갈 수 있습니다. 예를 들어 'ê°€'는 0xac00ì�¸ë�° ì�´ ë„� ë°”ì�´íЏ 때문ì—� 스트ë§� 처리가 곤란하게 ë�©ë‹ˆë‹¤. 그래서 ë„� ë°”ì�´íŠ¸ë¥¼ 없앨 수 있는 ì�¸ì½”딩 기법ì�„ 개발하게 ë�œ ê±°ì£ . 07/13 23:22:49 코멘트 지우기 resy 윗분 얘기대로 ì�¸í„°ë„·ì—�서 ì•ˆì „í•œ ì†¡ìˆ˜ì‹ ì�„ 위해서 UTF-8 ì�˜ë¯¸ê°€ 있기ë�„ 합니다. ë„� 문ìž�ê°€ 들어가지 않으니까요. 대표ì �으로 HTTP í”„ë¡œí† ì½œì�€ í…�스트 ë°©ì‹�ì�´ë©°, ì „ì†¡ ë�°ì�´í„°ì—� ë„� 문ìž�ê°€ 들어갈 수 ì—†ì£ . UTF-8 개발ì—� 대한 ížˆìŠ¤í† ë¦¬ëŠ” 아래로 가면 ë³¼ 수 있습니다. http://www.cl.cam.ac.uk/~mgk25/ucs/utf-8-history.txt 07/13 23:58:19 코멘트 지우기 ì •íƒœì˜� utf 님ì�´ ì–˜ê¸°í•˜ì‹ ë¶€ë¶„ì�€ utf7 만으로ë�„ í•´ê²°ë�œ ë¬¸ì œìž…ë‹ˆë‹¤ :) asc 문ìž� 만으로 í•´ê²°ë�˜ëŠ” 문화권 사람들ì—�게 utf16,32 를 ë�„입하ë�¼ê³ ë§�í•´ë´�ì§œ 별로 먹히지ë�„ 않ì�„ 것ì�´ê³ .. euc 등ì�˜ ì�¸ì½”딩ì—�서 unicode 로 넘어가는 단계ì—�서ì�˜ 혼란ì�„ 좀 줄ì�´ê¸° 위한 ê³¼ë�„기ì � ì�¸ì½”딩ì�´ë�¼ê³ 보는게 ë�” ì�˜ë¯¸ 있지 않ì�„까 ì‹¶êµ°ìš”...









