Python Unicode - Historique des versions

Haypo: /* En pratique avec Python3 */

2012-11-18T01:16:31Z

En pratique avec Python3

← Version précédente		Version du 18 novembre 2012 à 01:16
Ligne 198 :		Ligne 198 :
	** [http://svn.python.org/view?view=rev&revision=72208 Commit 72208]		** [http://svn.python.org/view?view=rev&revision=72208 Commit 72208]
	* [http://bugs.python.org/issue3187 Issue #3187]: os.listdir can return byte strings		* [http://bugs.python.org/issue3187 Issue #3187]: os.listdir can return byte strings
		+
		+	== OS encoding(s) ==
		+
		+	OS data:
		+	* command line arguments
		+	* environment variables
		+	* standard input, output and error
		+	* filenames
		+
		+	Mac OS X:
		+	* filenames: UTF-8
		+	* command line arguments:
		+	** locale encoding for Python < XXX
		+	** UTF-8 for Python > XXX (changeset 45079ad1e260, issue #4388)
		+
		+	Windows:
		+	* filenames: MBCS (ANSI code page)
		+
		+	UNIX:
		+	* filenames: locale encoding, setlocale(LC_CTYPE, ""); encoding = nl_langinfo(CODESET)

	== En pratique avec Python3 ==		== En pratique avec Python3 ==

Haypo le 22 juin 2011 à 10:18

2011-06-22T10:18:08Z

← Version précédente		Version du 22 juin 2011 à 10:18
Ligne 1 :		Ligne 1 :
	[[CatÃ©gorie:Langage de programmation]]		[[CatÃ©gorie:Langage de programmation]]
	{{Retour\|Python\|Retour Ã Python}}		{{Retour\|Python\|Retour Ã Python}}
		+
		+	Je suis en train d'Ã©crire un livre sur la [https://github.com/haypo/unicode_book/wiki programmation avec Unicode], en anglais.

	== Python et Unicode ==		== Python et Unicode ==

Haypo: /* Base de données */

2011-02-28T16:12:28Z

Base de données

← Version précédente		Version du 28 février 2011 à 16:12
Ligne 172 :		Ligne 172 :
	* LDAP (python-ldap)		* LDAP (python-ldap)
	** LDAP parle UTF-8 depuis la version 3 ([http://tools.ietf.org/html/rfc4511 RFC 4511])		** LDAP parle UTF-8 depuis la version 3 ([http://tools.ietf.org/html/rfc4511 RFC 4511])
		+	** en fÃ©vrier 2011, python-ldap ne supportait pas encore le type unicode de Python2 pour consever la compatibilitÃ© LDAP version 2 qui exige un encodage explicite

	== Texte encodÃ© deux fois en UTF-8 ==		== Texte encodÃ© deux fois en UTF-8 ==

Haypo: /* Base de données */

2011-02-28T16:09:39Z

Base de données

← Version précédente		Version du 28 février 2011 à 16:09
Ligne 170 :		Ligne 170 :
	** [http://initd.org/psycopg/docs/connection.html#connection.encoding connection.encoding]		** [http://initd.org/psycopg/docs/connection.html#connection.encoding connection.encoding]
	** [http://initd.org/psycopg/docs/usage.html#unicode-handling Unicode handling]		** [http://initd.org/psycopg/docs/usage.html#unicode-handling Unicode handling]
		+	* LDAP (python-ldap)
		+	** LDAP parle UTF-8 depuis la version 3 ([http://tools.ietf.org/html/rfc4511 RFC 4511])

	== Texte encodÃ© deux fois en UTF-8 ==		== Texte encodÃ© deux fois en UTF-8 ==

Haypo: /* Base de données */

2011-02-09T16:00:49Z

Base de données

← Version précédente		Version du 9 février 2011 à 16:00
Ligne 167 :		Ligne 167 :
	** MySQL n'aime pas "utf-8", utiliser utf8		** MySQL n'aime pas "utf-8", utiliser utf8
	** Lire le chapitre [http://dev.mysql.com/doc/refman/5.0/fr/charset.html Chapitre 10. Jeux de caractÃ¨res et Unicode] de la documentation MySQL		** Lire le chapitre [http://dev.mysql.com/doc/refman/5.0/fr/charset.html Chapitre 10. Jeux de caractÃ¨res et Unicode] de la documentation MySQL
		+	* PostgreSQL
		+	** [http://initd.org/psycopg/docs/connection.html#connection.encoding connection.encoding]
		+	** [http://initd.org/psycopg/docs/usage.html#unicode-handling Unicode handling]

	== Texte encodÃ© deux fois en UTF-8 ==		== Texte encodÃ© deux fois en UTF-8 ==

Haypo: /* Voir aussi */

2010-10-13T11:15:43Z

Voir aussi

← Version précédente		Version du 13 octobre 2010 à 11:15
Ligne 356 :		Ligne 356 :

	* [http://sebsauvage.net/python/charsets_et_encoding.html Charsets et encoding] (et Python)		* [http://sebsauvage.net/python/charsets_et_encoding.html Charsets et encoding] (et Python)
		+	* (en) [http://docs.python.org/howto/unicode.html Unicode HOWTO] : Guide de la documentation officielle Python
	* (en) [http://www.reportlab.com/i18n/python_unicode_tutorial.html Python Unicode Tutorial]		* (en) [http://www.reportlab.com/i18n/python_unicode_tutorial.html Python Unicode Tutorial]
	* (en) [http://docs.djangoproject.com/en/dev/ref/unicode/ Unicode data in Django]		* (en) [http://docs.djangoproject.com/en/dev/ref/unicode/ Unicode data in Django]

Haypo: /* Arguments de la ligne de commande */

2010-05-18T09:13:41Z

Arguments de la ligne de commande

← Version précédente		Version du 18 mai 2010 à 09:13
Ligne 242 :		Ligne 242 :

	<code>char argv</code> est converti en <code>wchar_t</code> par _Py_char2wchar() qui utilise mbstowcs() ou mbrtowc()+surrogates), puis en liste de chaÃ®nes unicode par PySys_SetArgv() qui utilise PyUnicode_FromWideChar().		<code>char argv</code> est converti en <code>wchar_t</code> par _Py_char2wchar() qui utilise mbstowcs() ou mbrtowc()+surrogates), puis en liste de chaÃ®nes unicode par PySys_SetArgv() qui utilise PyUnicode_FromWideChar().
		+
		+	Pour rÃ©cupÃ©rer sys.argv sous forme d'octets, utilisez :
		+	encoding = locale.getpreferredencoding()
		+	argv_bytes = [arg.encode(encoding, "surrogateescape") for arg in sys.argv]

	=== Fonctions du module locale ===		=== Fonctions du module locale ===

Haypo: /* Noms de fichiers et variables d'environnement */

2010-05-18T08:43:43Z

Noms de fichiers et variables d'environnement

← Version précédente		Version du 18 mai 2010 à 08:43
Ligne 207 :		Ligne 207 :
	** Autre : nl_langinfo(CODESET), ou "utf8" si nl_langinfo() Ã©choue ou n'existe pas		** Autre : nl_langinfo(CODESET), ou "utf8" si nl_langinfo() Ã©choue ou n'existe pas
	* (sys.setfilesystemencoding() : fonction supprimÃ©e par le module site)		* (sys.setfilesystemencoding() : fonction supprimÃ©e par le module site)
		+
		+	Pour les variables d'environnement, Python 3.2 a en plus os.environb et os.getenvb() pour rÃ©cupÃ©rer les variables dans le type bytes (avant qu'elles soient dÃ©codÃ©es).

	=== TextIOWrapper, stdin, stdout et stderr ===		=== TextIOWrapper, stdin, stdout et stderr ===

Haypo: /* Arguments de la ligne de commande */

2010-05-17T01:04:30Z

Arguments de la ligne de commande

← Version précédente		Version du 17 mai 2010 à 01:04
Ligne 233 :		Ligne 233 :

	L'algorithme ressemble Ã Ã§a :		L'algorithme ressemble Ã Ã§a :
-	# argv est ~~le tableau des arguments sous forme~~ de ~~chaÃ®ne d'octets~~	+	# argv est une liste de bytes
-	encoding = ~~sys~~.getpreferredencoding()	+	encoding = locale.getpreferredencoding()
	sys.argv = [arg.decode(encoding, 'surrogateescape') for arg in argv]		sys.argv = [arg.decode(encoding, 'surrogateescape') for arg in argv]

	Les arguments sont dÃ©codÃ©s selon le jeu de caractÃ¨res de la locale, et les caractÃ¨res ne pouvant Ãªtre dÃ©codÃ©s sont stockÃ©s sous forme de ''surrogates''.		Les arguments sont dÃ©codÃ©s selon le jeu de caractÃ¨res de la locale, et les caractÃ¨res ne pouvant Ãªtre dÃ©codÃ©s sont stockÃ©s sous forme de ''surrogates''.

-	~~Niveau~~ code :	+	<code>char argv</code> est converti en <code>wchar_t</code> par _Py_char2wchar() qui utilise mbstowcs() ou mbrtowc()+surrogates), puis en liste de chaÃ®nes unicode par PySys_SetArgv() qui utilise PyUnicode_FromWideChar().
-	* main() convertit les char* en wchar_t* ~~avec _Py_char2wchar()~~	+
-	* _Py_char2wchar() ~~tente~~ mbstowcs(), ou ~~encode caractÃ¨re par caractÃ¨re avec surrogates si mbstowcs~~() ~~a Ã©chouÃ©~~	+
-	* PySys_SetArgv() ~~=> makeargvobject() =>~~ PyUnicode_FromWideChar()	+
-	* Voir la fonction PySys_SetArgv()	+

	=== Fonctions du module locale ===		=== Fonctions du module locale ===

Haypo: /* Arguments de la ligne de commande */

2010-05-17T01:00:27Z

Arguments de la ligne de commande

← Version précédente		Version du 17 mai 2010 à 01:00
Ligne 238 :		Ligne 238 :

	Les arguments sont dÃ©codÃ©s selon le jeu de caractÃ¨res de la locale, et les caractÃ¨res ne pouvant Ãªtre dÃ©codÃ©s sont stockÃ©s sous forme de ''surrogates''.		Les arguments sont dÃ©codÃ©s selon le jeu de caractÃ¨res de la locale, et les caractÃ¨res ne pouvant Ãªtre dÃ©codÃ©s sont stockÃ©s sous forme de ''surrogates''.
		+
		+	Niveau code :
		+	* main() convertit les char* en wchar_t* avec _Py_char2wchar()
		+	* _Py_char2wchar() tente mbstowcs(), ou encode caractÃ¨re par caractÃ¨re avec surrogates si mbstowcs() a Ã©chouÃ©
		+	* PySys_SetArgv() => makeargvobject() => PyUnicode_FromWideChar()
		+	* Voir la fonction PySys_SetArgv()

	=== Fonctions du module locale ===		=== Fonctions du module locale ===