src/ltj-rmlgbm.lua

   1 --
   2 -- ltj-rmlgbm.lua
   3 --
   4 luatexja.load_module('base');      local ltjb = luatexja.base
   5
   6 local cidfont_data = {}
   7 local cache_chars = {}
   8 local cache_ver = 10
   9 local identifiers = fonts.hashes.identifiers
  10
  11 local cid_reg, cid_order, cid_supp, cid_name
  12 local cid_replace = {
  13    ["Adobe-Japan1"] = {"UniJIS2004-UTF32", 23059, 7,
  14                        function (i)
  15                           if (231<=i and i<=632) or (8718<=i and i<=8719)
  16                              or (12063<=i and i<=12087) then
  17                              return 327680 -- 655360/2
  18                           elseif 9758<=i and i<=9778 then
  19                              return 218453 -- 655360/3
  20                           elseif 9738<=i and i<=9757 then
  21                              return 163840 -- 655360/4
  22                           end
  23                        end},
  24                        -- 基本的には JIS X 0213:2004 に沿ったマッピング
  25    ["Adobe-Korea1"] = {"UniKS-UTF32",  18351, 2,
  26                        function (i)
  27                           if 8094<=i and i<=8100 then
  28                              return 327680 -- 655360/2
  29                           end
  30                        end},
  31    ["Adobe-GB1"]    = {"UniGB-UTF32",  30283, 5,
  32                        function (i)
  33                           if (814<=i and i<=939) or (i==7716)
  34                              or (22355<=i and i<=22357) then
  35                              return 327680 -- 655360/2
  36                           end
  37                        end},
  38    ["Adobe-CNS1"]   = {"UniCNS-UTF32", 19178, 7,
  39                        function (i)
  40                           if (13648<=i and i<=13742) or (i==17603) then
  41                              return 327680 -- 655360/2
  42                           end
  43                        end},
  44    ["Adobe-KR"] = {"UniAKR-UTF32", 22896, 9,
  45                        function (i)
  46                           if i==3057 then
  47                              return 655360*2
  48                           elseif i==3058 then
  49                              return 655360*3
  50                           elseif i==12235 or i==12236 then
  51                              return 163840 -- 655360/4
  52                           end
  53                        end},
  54 }
  55
  56 -- reading CID maps
  57 local make_cid_font
  58 do
  59    local line, fh -- line, file handler
  60    local tt,cidm -- characters, cid->(Unicode)
  61
  62    local function load_cid_char(cid_dec, mke)
  63       local cid, ucs, ucsa
  64       line = fh:read("*l")
  65       while line do
  66          if string.find(line, "end...?char") then
  67             line = fh:read("*l"); return
  68          else -- WMA l is in the form "<%x+>%s%d+"
  69             ucs, cid = string.match(line, "<(%x+)>%s+<?(%x+)>?")
  70             cid = cid_dec(cid); ucs = tonumber(ucs, 16);
  71             if not tt[ucs]  then
  72                tt[ucs] = mke(cid); cidm[cid]=ucs
  73             end
  74          end
  75          line = fh:read("*l")
  76       end
  77    end
  78
  79    local function load_cid_range(inc, cid_dec, mke)
  80       local bucs, eucs, cid
  81       line = fh:read("*l")
  82       while line do
  83         if string.find(line, "end...?range") then
  84             line = fh:read("*l"); return
  85          else -- WMA l is in the form "<%x+>%s+<%x+>"
  86             bucs, eucs, cid = string.match(line, "<(%x+)>%s+<(%x+)>%s+<?(%x+)>?")
  87             cid = cid_dec(cid);
  88             bucs = tonumber(bucs, 16); eucs = tonumber(eucs, 16)
  89             for ucs = bucs, eucs do
  90                if not tt[ucs]  then
  91                   tt[ucs] = mke(cid); cidm[cid]=ucs
  92                end
  93                cid = inc(cid)
  94             end
  95          end
  96          line = fh:read("*l")
  97       end
  98    end
  99
 100    local function open_cmap_file(name, inc, cid_dec, mke)
 101       local fn = kpse.find_file(name, 'cmap files')
 102       if fn then
 103          fh = io.open(fn, "r")
 104          line = fh:read("*l")
 105          while line do
 106             if string.find(line, "%x+%s+begin...?char") then
 107                load_cid_char(cid_dec, mke)
 108             elseif string.find(line, "%x+%s+begin...?range") then
 109                load_cid_range(inc, cid_dec, mke)
 110             else
 111                line = fh:read("*l")
 112             end
 113          end
 114          fh:close();
 115       end
 116    end
 117
 118    local function increment(a) return a+1 end
 119    local function entry(a)
 120       return {index = a}
 121    end
 122    local feat_dummy_vert = { gsub={vert={dflt={dflt=true}}} }
 123    local seq_dummy_vert={{
 124      features={vert={dflt={dflt=true}}},
 125      --flags={false,false,false,false},
 126      --index=1, name="s_s_0", skiphash=false, steps={coverage={},index=1},
 127      ["type"]="gsub_single", order='vert',
 128    }}
 129    make_cid_font = function ()
 130       local kx = cid_replace[cid_name]
 131       if not kx then return end
 132       local k = {
 133          cidinfo = { ordering=cid_order, registry=cid_reg, supplement=kx[3] },
 134          encodingbytes = 2, extend=1000, format = 'opentype',
 135          direction = 0, characters = {}, parameters = {
 136             ascender = 655360*0.88,
 137             descender = 655360*0.12,
 138          },
 139          embedding = "no", cache = "yes", factor = 0, hfactor = 0, vfactor = 0,
 140          tounicode = 1,
 141          properties = { language = "dflt", script = "dflt" },
 142       }
 143       cidfont_data[cid_name] = k
 144
 145       -- CID => Unicode 符号空間
 146       local tth, cidmo = {}, {}
 147       tt, cidm = tth, cidmo
 148       for i = 0,kx[2] do cidm[i] = -1 end
 149       open_cmap_file(kx[1] .. "-H", increment, tonumber, entry)
 150       k.characters = tth
 151
 152       -- Unicode にマップされなかった文字の処理
 153       -- これらは TrueType フォントを使って表示するときはおかしくなる
 154       local ttu, pricode = {}, 0xF0000
 155       for i,v in ipairs(cidmo) do
 156          if v==-1 then
 157             tth[pricode], cidmo[i], pricode
 158                = { index = i }, pricode, pricode+1;
 159          end
 160          ttu[cid_order .. '.' .. i] = cidmo[i]
 161       end
 162
 163       -- shared
 164       k.shared = {
 165          otfdata = {
 166             cidinfo= k.cidinfo, verbose = false,
 167             shared = { featuredata = {}, },
 168          },
 169          dynamics = {}, processes = {},
 170          rawdata = {}, features={},
 171       }
 172       k.resources = {
 173          unicodes = ttu,
 174          features = feat_dummy_vert,
 175          sequences = seq_dummy_vert,
 176       }
 177       k.descriptions = {}
 178       cache_chars[cid_name]  = { [655360] = k.characters }
 179
 180       -- 縦書用字形
 181       tt, cidm = {}, {}
 182       local ttv = {}; k.ltj_vert_table = ttv
 183       for i = 0,kx[2] do cidm[i] = -1 end
 184       open_cmap_file(kx[1] .. "-V", increment, tonumber, entry)
 185       for i,v in pairs(tt) do
 186          ttv[i] =  cidmo[v.index] -- "unicode" of vertical variant
 187       end
 188
 189       -- tounicode エントリ
 190       local cidp = {nil, nil}; tt, ttu, cidm = {}, {}, {}
 191       open_cmap_file(cid_name .. "-UCS2",
 192                      function(a)
 193                         a[2] = a[2] +1 ; return a
 194                      end,
 195                      function(a)
 196                         cidp[1] = string.upper(string.sub(a,1,string.len(a)-4))
 197                         cidp[2] = tonumber(string.sub(a,-4),16)
 198                         return cidp
 199                      end,
 200                      function(a) return a[1] ..string.format('%04X',a[2])  end)
 201       -- tt は cid -> tounicode になっているので cidm -> tounicode に変換
 202       local kxf = kx[4]
 203       for i,v in ipairs(cidmo) do
 204          k.characters[v].width = kxf(i)
 205          if v>=0xF0000 then
 206             k.characters[v].tounicode = tt[i]
 207          end
 208       end
 209
 210       -- Save
 211       if k and k.characters and k.characters[46] then
 212         k.characters[46].width = math.floor(655360/14);
 213       end
 214       ltjb.save_cache("ltj-cid-auto-" .. string.lower(cid_name),
 215                       {version = cache_ver, k})
 216       k.shared.rawdata.resources=k.resources
 217       k.shared.rawdata.descriptions=k.descriptions
 218    end
 219 end
 220
 221 --
 222 local cidf_vert_processor
 223 do
 224    local traverse_id, is_node = node.direct.traverse_id, node.is_node
 225    local to_direct = node.direct.todirect
 226    local id_glyph = node.id('glyph')
 227    local getfont = node.direct.getfont
 228    local getchar = node.direct.getchar
 229    local setchar = node.direct.setchar
 230    local font_getfont = font.getfont
 231    cidf_vert_processor = {
 232       function (head, fnum)
 233          local fontdata = font_getfont(fnum)
 234          if head and luatexja.jfont.font_metric_table[fnum].vert_activated then
 235             local vt = fontdata.ltj_vert_table
 236             local nh = is_node(head) and to_direct(head) or head
 237             for n in traverse_id(id_glyph, head) do
 238                if getfont(n)==fnum then
 239                  local c = getchar(n); setchar(n, vt[c] or c)
 240                end
 241             end
 242             return head, false
 243          end
 244       end
 245    }
 246 end
 247
 248 local function cid_cache_outdated(t) return t.version~=cache_ver end
 249 local function read_cid_font()
 250    local dat = ltjb.load_cache("ltj-cid-auto-" .. string.lower(cid_name),
 251                                cid_cache_outdated)
 252    if dat then
 253       dat[1].shared.rawdata.resources=dat[1].resources
 254       dat[1].shared.rawdata.descriptions=dat[1].descriptions
 255       cidfont_data[cid_name] = dat[1]
 256       cache_chars[cid_name]  = { [655360] = cidfont_data[cid_name].characters }
 257    else
 258       -- Now we must create the virtual metrics from CMap.
 259       make_cid_font()
 260    end
 261    if cidfont_data[cid_name] then
 262       cidfont_data[cid_name].shared.processes = cidf_vert_processor
 263       for i,v in pairs(cidfont_data[cid_name].characters) do
 264          if not v.width then v.width = 655360 end
 265          v.height, v.depth = 576716.8, 78643.2 -- optimized for jfm-ujis.lua
 266       end
 267       return cidfont_data[cid_name]
 268    else
 269       return nil
 270    end
 271 end
 272
 273 -- High-level
 274 local function prepare_cid_font(reg, ord)
 275    cid_reg, cid_order, cid_name, cid_supp = reg, ord, reg .. '-' .. ord
 276    return cidfont_data[cid_name] or read_cid_font()
 277 end
 278
 279
 280 local definers = fonts.definers
 281 local function mk_rml(name, size, id)
 282    local specification = definers.analyze(name,size)
 283    --specification = definers.resolve(specification) (not needed)
 284    specification.detail = specification.detail or ''
 285    do
 286       local n = specification.name
 287       if n:sub(1,1)=="{" then n=n:sub(2) end
 288       if n:sub(-1)=="}" then  n=n:sub(1,-2) end
 289       specification.name=n
 290    end
 291    local fontdata = {}
 292    local cachedata = {}
 293    local s = cidfont_data[cid_name]
 294    for k, v in pairs(s) do
 295       fontdata[k] = v
 296       cachedata[k] = v
 297    end
 298    fontdata.characters = nil
 299    cachedata.characters = nil
 300    fontdata.shared = nil
 301    cachedata.shared = nil
 302    if s.shared then
 303       cachedata.shared = {}
 304       local shared = cachedata.shared
 305       for k, v in pairs(s.shared) do
 306          shared[k] = v
 307       end
 308    end
 309
 310    -- characters & scaling
 311    if size < 0 then size = -size * 655.36 end
 312    local scale = size / 655360
 313
 314    do
 315       local def_height =  0.88 * size
 316       -- character's default height (optimized for jfm-ujis.lua)
 317       local def_depth =  0.12 * size  -- and depth.
 318       if not cache_chars[cid_name][size] then
 319          cache_chars[cid_name][size]  = {}
 320          for k, v in pairs(cache_chars[cid_name][655360]) do
 321             cache_chars[cid_name][size][k] = {
 322                index = v.index, width = v.width * scale,
 323                height = def_height, depth = def_depth, tounicode = v.tounicode,
 324             }
 325          end
 326       end
 327       fontdata.characters = cache_chars[cid_name][size]
 328       cachedata.characters = cache_chars[cid_name][size]
 329    end
 330    luatexja.rmlgbm.vert_addfunc(id, fontdata)
 331
 332    -- other parameters
 333    do
 334       local parameters = {}
 335       for k, v in pairs(s.parameters) do  parameters[k] = v * scale end
 336       fontdata.parameters  = parameters; fontdata.size  = size; fontdata.resources  = s.resources
 337       cachedata.parameters = parameters; cachedata.size = size; cachedata.resources = s.resources
 338    end
 339
 340    -- no embedding
 341    local var = ''
 342    local s = string.match(specification.detail, 'slant=([+-]*%d*%.?%d)')
 343    if s and e~=0  then
 344       s = s * 1000
 345       var, fontdata.slant  = var .. 's' .. tostring(s), s
 346    end
 347    local e = string.match(specification.detail, 'extend=([+-]*%d*%.?%d)')
 348    if e and e~=1  then
 349       e = e * 1000
 350       var, fontdata.extend  = var .. 'x' .. tostring(e), e
 351    end
 352    fontdata.name = specification.name .. size .. var; cachedata.name = fontdata.name
 353    fontdata.fullname = specification.name .. var; cachedata.fullname = fontdata.fullname
 354    fontdata.psname = specification.name; cachedata.psname = fontdata.psname
 355    identifiers[id] = cachedata
 356
 357    return fontdata
 358 end
 359
 360 local function font_callback(name, size, id, fallback)
 361    if name:sub(1,1)=="{" and name:sub(-1)=="}" then name = name:sub(2,-2) end
 362    local p = name:find(":") or 0
 363    if name:sub(1, p-1) == 'psft' then
 364       local s = "Adobe-Japan1-7"
 365       local basename = name:sub(p+1)
 366       local p = basename:find(":")
 367       local q = basename:find("/[BI][BI]?")
 368       if q and p and q<=p then
 369          basename = basename:gsub('/[BI][BI]?', '', 1)
 370          p = basename:find(":")
 371       end
 372       if p then
 373          local xname = basename:sub(p+1)
 374          p = 1
 375          while p do
 376             local q = xname:find(";", p+1) or xname:len()+1
 377             if xname:sub(p, p+3)=='cid=' and q>p+4 then
 378                s = xname:sub(p+4, q-1)
 379             end
 380             if xname:len()+1==q then p = nil else p = q + 1 end
 381          end
 382       end
 383       cid_reg, cid_order = string.match(s, "^(.-)%-(.-)%-(%d-)$")
 384       if not cid_reg then
 385          cid_reg, cid_order = string.match(s, "^(.-)%-(.-)$")
 386       end
 387       if not prepare_cid_font(cid_reg, cid_order) then
 388          ltjb.package_error('luatexja',
 389                             "bad cid key `" .. s .. "'",
 390                             "I couldn't find any non-embedded font information for the CID\n" ..
 391                             '`' .. s .. "'. For now, I'll use `Adobe-Japan1-6'.\n"..
 392                             'Please contact the LuaTeX-ja project team.')
 393          cid_name = "Adobe-Japan1"
 394       end
 395       return mk_rml(basename, size, id)
 396    else
 397       local fontdata=fallback(name, size, id)
 398       if type (fontdata) == "table" and fontdata.encodingbytes == 2 then
 399         luatexbase.call_callback ("luaotfload.patch_font", fontdata, name, id)
 400       else
 401         luatexbase.call_callback ("luaotfload.patch_font_unsafe", fontdata, name, id)
 402       end
 403       return fontdata
 404    end
 405 end
 406
 407 luatexja.rmlgbm = {
 408    prepare_cid_font = prepare_cid_font,
 409    cidfont_data = cidfont_data,
 410    font_callback = font_callback,
 411    vert_addfunc = function () end, -- dummy, set in ltj-direction.lua
 412 }
 413
 414 prepare_cid_font('Adobe', 'Japan1')