update NEWS [ci skip]

update to unifont 9.0.04

whoops

use ptrdiff_t rather than ssize_t, as ssize_t is non-standard (it is POSIX, not C)

use stdbool.h and inttypes.h in MSVC 2013 and later, and use more C99-compatible definitions of false and true earlier (fix #90)

update .gitignore for custom test

new utf8proc_map_custom for hooking in user-defined custom mappings (#89)

* new utf8proc_map_custom for hooking in user-defined custom mappings

* whoops, add test program

* NEWS, version bump for 2.1

* change test functions to static so that gcc doesn't complain about missing prototypes

silence MSVC warning about conversion to uint8 (fix #86)

typo in docstrings

Tlsa/ucs4 normalize (#88)

* Split codepoint sequence normalisation out into separate function.

This creates utf8proc_normalize_utf32() which takes and returns
a UTF-32 string, applying the following options:

- UTF8PROC_NLF2LS
- UTF8PROC_NLF2PS
- UTF8PROC_NLF2LF
- UTF8PROC_STRIPCC
- UTF8PROC_COMPOSE
- UTF8PROC_STABLE

The utf8proc_reencode() function has been updated to call the
new utf8proc_normalize_utf32().

* Update code documentation: utf8proc_reencode handles UTF8PROC_CHARBOUND.

Change definition of UINT16_MAX macro (#84)

Change UINT16_MAX from `~(utf8proc_uint16_t)0` to fixed value `65535U` to prevent weird behaviour in complex expressions.

add missing links

date fix in NEWS

NEWS and version numbers for 2.0.2 (#81)

* Add NEWS.md items for #79 and #80

* Prepare version numbers for 2.0.2

* Also update API version to 2.0.2

use a different variable name for nested loop in bench.c (#80)

and declare it ahead of time to avoid "error: 'for' loop initial declarations are only allowed in C99 mode"

Move -Wmissing-prototypes from Makefile to .travis.yml (#79)

since MSVC doesn't understand this flag, and the current
mechanism for building Julia with MSVC goes through the makefile

Convert compiler warnings to errors for Travis builds (#73)

added NEWS for #78

Use versioned Unicode data URLs (#78)

This ensures the tests keep working when a new Unicode version is released.

NEWS and version bump for 2.0.1 release, to come out shortly

Fix incorrect use of `lbc` instead of `lbc_override` (#77)

add appveyor badge to readme

[ci skip]

NEWS update

the ABI version was already bumped in #62, does not need to be bumped again in #70

NEWS for 2.0

Walk back ABI breaking changes (#76)

update to Unifont 9 (for Unicode 9 charwidths) (#75)

Smaller tables (#68)

* convert sequences to utf-16 (saves 25kb)

* store sequence length in properties instead using -1 termination (saves 10kb)

* cache index for slightly faster data creation

* store lower/upper/title mapping in sequence array (saves 25kb). Add utf8proc_totitle, as title_mapping cannot be used to get the title codepoint anymore. Rename xxx_mapping to xxx_seqindex, so programs assuming a value with the old meaning fail at compile time

* change combination array data type to uint16 (saves 40kb)

* merge 1st and 2nd comb index (saves 50kb)

* kill empty prefix/suffix in combination array (saves 50kb)

* there was no need to have a separate combination start array, it can be merged in a single array

* some fixes

* mark the table as const again

* and regen

note Unicode 9 support (from #70) in README

Unicode 9 updates (#70)

* Updates for Unicode 9.0.0 TR29 Changes

- New rules GB10/(12/13) are used to combine emoji-zwj sequences/
  (force grapheme breaks every two RI codepoints). Unfortunately this
  breaks statelessness of grapheme-boundary determination. Deal with
  this by ignoring the problem in utf8proc_grapheme_break, and by
  hacking in a special case in decompose

- ZWJ moved to its own boundclass, update what is now GB9 accordingly.

- Add comments to indicate which rule a given case implements

- The Number of bound classes Now exceeds 4 bits, expand to 8 and
  reorganize fields

* Import Unicode 9 data

* Update Grapheme break API to expose state override

* Bump MAJOR version

Merge pull request #69 from JuliaLang/tk/cache

fix the travis cache

fix the travis cache

certificate is expired on cache.e.ip.saba.us, it now lives at cache.julialang.org

Merge pull request #66 from michaelnmmeyer/master

Fix overrun

Fix overrun

Merge pull request #62 from michaelnmmeyer/master

Reduce the size of the binary.

Bump version number.

Reduce the size of the binary.

Use integers instead of pointers in Unicode tables. Saves 226 kb / 716 kb in the
compiled library.

Merge pull request #61 from fgsch/issue_60

Silence warning with -Wextra

Silence warning with -Wextra

Fixes #60.

update Unicode version in header-file comment

update copyright statements to list recent contributors and year

Merge pull request #59 from petercolberg/master

Version 1.3.1

Update NEWS for version 1.3.1

Increment patch version

Merge pull request #58 from petercolberg/master

Fix build warnings

Fix deprecated warnings with Julia 0.4

Test `make install`

Generate reproducible manifest of installed files.

Test `make clean`

Fix sscanf argument type for format %x

Fix missing static declarations for internal functions

Fix implicit function declarations

Move common test functions to separate module

This resolves warnings for missing function prototypes.

Fix installation of shared library symlinks

Use relative symlinks that are independent of installation prefix.

Drop superfluous .so.MAJOR.MINOR symlink, which is and should never
be needed in practice. The purpose of shared library symlinks is to
provide libraries for compile-time linking (.so) and for run-time
linking using the SONAME (.so.MAJOR).

Add missing files to `make clean`

Merge pull request #57 from petercolberg/master

Fix MingW build test

Fix MinGW build test

Describe interactive debugging for appveyor

Merge pull request #56 from petercolberg/master

Fix Travis build and improve build reproducibility

Use consistent indentation in Travis config

Indent with 4 spaces, as in the Travis config for Julia.

Set URLCACHE to JuliaLang cache server for Travis builds

Download Unicode data from upstream server by default.

Download GNU Unifont from reliable GNU mirror by default.

Generate fontforge font files in makefile

Revise the script to directly read fontforge font files, which are
generated in the makefile. This permits overriding the fontforge path
during the build, and executing fontforge in parallel with make -j.

Avoid duplicating download URLs in the script, which ensures that the
script itself works without network access, e.g., when downloading the
data files on a developer machine with network access and executing the
script on a build machine without network access.

Update Unicode data

Fixes Travis builds on Ubuntu 12.04 LTS with Ruby 1.9.3-p551.

Merge pull request #55 from petercolberg/master

Do not export internal unsafe_encode_char()

Enable compiler warnings in makefile

Do not export internal unsafe_encode_char()

add missing NEWS links

updated NEWS for 1.3

Merge pull request #51 from JuliaLang/cjh/unifont8

Update character widths from Unifont 8.0.01

Update Unicode data

Update Unifont to 8.0.01

Merge pull request #49 from JuliaLang/cjh/mw

Try again to update Unicode 8 data

Updated Unicode 8 data - now sorted internally by data generator

Update Unicode data

sort keys to try to eliminate data dependence on Ruby version

Fix gitignore to ignore .so*

fix #46 (make sure symbol-like codepoints have nonzero width even if they aren't in Unifont)

update NEWS for #43 and #45

Update README.md

Link to Lua-mojibake (closes #44)

Bump Unicode version (ref: #45)

Merge pull request #45 from JuliaLang/cjh/unicode8

Update data to Unicode 8.0.0 standard

Force Travis to spit out diff

Updated data file to Unicode 8.0.0

Merge pull request #43 from JuliaLang/nl/flags

Always pass -fPIC in CFLAGS

Minor fixes to work with Unicode 8.0.0 data

Always pass -fPIC and -std=c99 in CFLAGS

Fixes #42.

Fix make check

#35 and #40 added new tests that #38 did not take into account

this is one case where it would be good if Travis re-tested the PR
after new commits get pushed to master

Merge pull request #38 from jlec/jlec-master

Enhance build process

bump API/ABI version to 1.3, add NEWS

Merge pull request #40 from JuliaLang/casefuncs

add toupper/tolower functions

add toupper/tolower functions (for JuliaLang/julia#11471)

Merge pull request #35 from ScottPJones/spj/valid

Fix #34 handle 66 Unicode non-characters and surrogates correctly

Add tests for valid codepoints and iterate function

Fix #34 handle 66 Unicode non-characters, also improve performance and surrogate handling

Enhance build process

* Allow optimization flgas in CFLAGS to be overwritten
* Use Uppercase CC and CFLAGS
* Create all soname symlinks

Signed-off-by: Justin Lecher <jlec@gentoo.org>

Merge pull request #32 from JuliaLang/tk/ssize_t_typedef

Use a typedef instead of a #define for ssize_t with MSVC

Prefix other C99 typedefs with utf8proc_

Use a new typedef utf8proc_ssize_t to avoid define collisions

with MSVC

Run appveyor also on release branches

rename DLLEXPORT to UTF8PROC_DLLEXPORT to prevent conflicts with other header files that define DLLEXPORT

build bench/bench for make check, to lessen the chance that it bitrots again

fix some stray references to mojibake in the bench/ directory