eeshu 发表于 2023-10-14 17:00:59

(20231011)全宋体和部件检索重大更新

本帖最后由 eeshu 于 2023-10-15 20:33 编辑

简要提示:本次字体更新新增Unicode 15.1 I区字形,部件检索功能键重新布局。其他说明,见以下WFG兄的详细说明。
另外,借此贴向W兄及本帖末尾提及的这些令人尊敬的朋友致以敬意,是他们无私不懈的付出才成就了这项伟大的事业。
以下文字引自W兄博客https://fgwang.blogspot.com/2023/10/unicode-151.html
——————————————————————————————————————————————————————————————————————
全新的嘗試
「部件檢索」發布於 2015 年,八年來一直穩定地擔負著檢索「難檢漢字」的工作。期間歷經多次的擴編漢字,由最早的七萬多漢字到現在的近二十萬。也做了一些小改進,但整體的運作方式基本上並未改變。這一次的改版,我大膽嘗試了一項新的——「異體檢字」功能,讓「部件檢字」與「異體檢字」得以混合使用、相互支援,這讓檢字的操作能夠更加地靈活、方便,堪稱是一項突破性的創舉。


異體檢字
其實「異體檢字」的想法我已醞釀多年。最早只是個模糊的概念,知道要往這方向努力,但說不上來該怎麼做、能做些什麼?直到完成了《教育部異體字字典》的字頭清理工作,這想法才逐漸清晰起來,但具體該怎麼做?仍是毫無頭緒。

隨著一次次的擴增漢字、更新字庫,我也不斷在思索,該怎麼把「異體檢字」功能融合進「部件檢索」裏?資料該怎麼安排、記錄?又該如何運算?

直到「漢字構形資料庫」的字頭清理完畢,能完整展現它的異體字表(以《漢語大字典》第一版的異體字表為基礎)後,一切時機似乎都成熟了。於是開始動手,花了一天的時間修改程式、調整操作介面,做出了一個雛形。又經過一段時間的試用、改進,終於實踐了我的想法,把「異體檢字」功能正式推上檯面。


回顧這一路走來,雖然並沒有明確地計劃,但無形中我的不成熟想法,卻似乎一路引領著我朝著特定的方向前進,結果卻像是個有系統的漸次推進,逐步完成了相關數據的收集,讓醞釀多年的想法,得以「一夕成形」。


介面調整
因應新的異體檢字功能,操作方式略有調整:
略微調動了畫面元素,讓垂直方向的版面更爲緊湊,以便有更多空間可以顯示查詢結果。
廢除了複製模式的切換,現在不管是「虛擬鍵盤」或是「查詢結果」統一都是點擊滑鼠右鍵可以直接複製。隨時點擊隨時複製,不再需要切換模式。
「查詢結果」的每個字塊,現在分做田字形的四個區域,左鍵點擊不同區域各有不同功能,如版面右上角的圖例所示。例如左鍵點擊字塊的左上角是查詢該字的異體字,點擊字塊的右下角預設是跳轉字統網查字。
除了原先「黑三角按鈕」的「部件查字鍵」外,新增一個「白三角按鈕」的「異體查字鍵」,可以直接在輸入框打入想查的字,再按「白三角按鈕」(或者 Shift + Enter)即可查出所有異體字。輸入框若已輸有很多字,不必消去,直接反白選擇想查的字,再按「查字鍵」即可。
異體字的查詢結果,以「正體字」領頭(橘色虛線框標示),其他異體字跟隨其後。若該字分屬於多組異體字關係,則依序折行將多組異體關係列出。
目前異體數據只是快速地粗定,《異體字字典》與《漢字構形資料庫》的異體字表有一千多組有衝突,雙方認定的正體字多有不同,必須人工一一校閱調整。尚有八百組待查,還在慢慢努力優化之中。另外簡繁漢字的異體關係也須進一步整理、增添,日後會逐步優化。


操作實例


例如要檢索「????」這個字(字見於宋刊本《玉篇》):
此字右旁的部件「????」略為麻煩,需拆為「⺈㔾丶」來輸入,但知道是「色」字異體,因此可以先在輸入框中輸入「弗色」兩個部件,接下來:

方法一:按一下「部件查字鍵」即可查得「艴」字。

然後左鍵點擊「艴」字字塊的左上角,即可查得「艴」字的異體字「????」字。


方法二:反白選取「色」字,再按一下「異體查字鍵」即可以查得「色」字的異體「????」字。

左鍵點擊「????」字字塊的右上角,「????」字即會替換輸入框中原先的「色」字,再按一下「部件查字鍵」即可查得「????」字。


方法二的操作步驟雖然較多,但若希望能打出精確的部件時,可以用此法。只要靈活地交替使用「部件檢字」與「異體檢字」的功能,便可以快速地檢索到想要檢索的字,十方便利。


擴展I區
最新的 Unicode 15.1 已經於 9 月 12 日正式發布,對於漢字來說最主要的就是新增了 622 個擴展 I 區字形。這一版的全宋體與部件檢索已經完全支援新的 I 區字形,遷碼表也已完成,共計有 229 個既有的補充字被收入擴展 I 區,也就是對「全宋體」來說實際上只有 393 個字真正屬於新增。這既有的 229 個補充字已經予以註銷,遷往擴展 I 區所定義的新碼位。我花了一天的時間將我製作的四百多部詞典全部完成遷碼,如果您的文件曾使用到這些補充字,建議您儘快利用我所提供的 I 區遷碼表完成遷碼的動作,否則一旦更新了全宋體就會導致這些字無法正確顯示。


零星增字
除了擴展 I 區之外,事實上這一版的「全宋體」還增收了一些新字。

「漢字構形資料庫」裏整理有《中文大辭典》的字頭索引,但不知何因,只收錄了 47974 個字頭,與紙本實際的 49905,短少了 1931 個。這部分八月初央請了 suns99 兄幫忙,辛苦地逐一查閱紙本,歷時一個月,把近兩千個缺漏字頭補上。我再針對缺字,新造了近二十個字形,終於補全了《中文大辭典》的所有字頭。

《全唐詩》是詩詞領域裏一部重要的彙編,這次的「全宋體」也補全了《全唐詩》的所有缺字(依據中華書局本《全唐詩》,《全宋詞》則早前即已補全),讓大家在摘錄、引用這些詩詞時,不再需要忍受缺字的痛苦。

另外論壇的 klwo 兄也提供了《古白話詞語彙釋》的詞頭缺字統計,我據以新造了 18 個字形,補足了所有的詞頭用字。此外 Mastameta 兄也陸續匯報、提供了一些缺字字形,還有就是零星補造了一些整理字書時發現的缺字。相比於上次更新,總計共增添了四百六十餘字。


字形優化
上次更新時提到「漢字構形資料庫」有 10654 個字形屬於既收字,這些字形可擇其優者替換掉「全宋體」原先質量較差的字形。這項工作前次未及完成,現在已經全部完成,共優化了數千個既收字形,提供了更好的字形品質。


優化拆分
當初向國教院申請的《教育部異體字字典》拆分數據,部件殘缺的情形十分嚴重,但由於數量龐大,一直以來我僅能邊用邊小幅度地修正,抽不出時間大規模修訂。八月中旬 Walter Pai 兄終於跳進來幫忙,協助校訂這些有瑕疵的拆分數據。九月初完成了第一批三千字的校訂,經我粗略潤飾,已經加入「部件檢索」替換掉原始的瑕疵數據,讓這三千補充字能更正確地被檢索,大幅降低了漏檢的可能性。後續大約還有一萬餘字待校,Walter Pai兄還在努力之中,只要有新的進度,我會陸續更新給大家。


未竟之工
原本預計今年的上半年要將「漢字構形資料庫」的字頭清理完畢,下半年則開始回到「CBETA 缺字資料庫」的整理工作。前一件已如期完成,但依我目前的工作量能,十月中仍未能開始,後一件應該是難以達標了。照顧家中兩老,嚴重地壓縮了我所能支配的工作時間。不過我不會放棄,慢慢做,總有一天我能把「CBETA 缺字資料庫」的整理工作完成。


鳴謝
感謝這些原字型製作單位與作者的無私奉獻。
感謝老友 suns99 兄,總是不離不棄地與我並肩作戰。
感謝老友紫雪藍海兄,提供了許多數據,供我整理之用。
感謝好友 Mastameta 兄,陸續提供了一些勘誤與優化字形供我替換。
感謝好友 Walter Pai 兄,辛苦地協助校訂拆分數據。
感謝好友 klwo 兄,提供了許多索引數據,供我增補缺字。


現將此成果無條件分享出來,樂見學術研究、教育工作、個人閱讀這方面的運用,但請勿用做任何形式的商業營利行為。希望「全宋體」這個大型字庫以及「部件檢索」這個檢字工具,能在漢字文化的整理、研究上幫上一點小忙。

链接:链接:https://pan.baidu.com/s/1qbFkSS69owMOUkQs_vf5Ug
提取码:**** Hidden Message *****

eeshu 发表于 2023-10-15 20:29:45

scju 发表于 2023-10-15 19:21
无意冒犯,只是想建议e大,可能把WFG的博客网址附在文章里比较好,一来是提供消息的原始出处,二来也是对作 ...

你提醒的是,以前的帖子我都会贴上W兄的博客链接,这次匆忙,忘了。谢谢你。

之所以要设置回复可见就是因为我觉得那些无私的作者们应该还是乐见有人认真回复一下的。自己辛辛苦苦贡献了部作品出来,毫无反响冷冷清清,应该还是有点失落的。我发在这边的帖子都是征得过W兄本人同意的,他的这些朋友也是能看到的。虽然我猜W兄并不在意这些,但人之常情,看到自己的作品受人追捧总是一种认可和动力,你说呢?

scju 发表于 2023-10-15 21:19:24

本帖最后由 scju 于 2023-10-15 21:27 编辑

eeshu 发表于 2023-10-15 20:29
你提醒的是,以前的帖子我都会贴上W兄的博客链接,这次匆忙,忘了。谢谢你。

之所以要设置回复可见就是 ...

您的想法也有道理,不过因为毕竟帖子在这边是您发的,所以设置「回复可见」到底为了WFG,还是为了您自己(抱歉,我这里讲得比较直),可能难免会有点模棱两可,因此建议若要「回复可见」,也许可以在帖子中注明,这是为了给WFG鼓励,并不是您本人想要这些回复。如此一来,应该可以澄清一些不必要的猜想,对您也会较有帮助。

以上拙见。{:4_97:}

scju 发表于 2023-10-15 19:21:57

本帖最后由 scju 于 2023-10-15 19:26 编辑

无意冒犯,只是想建议e大,可能把WFG的博客网址附在文章里比较好,一来是提供消息的原始出处,二来也是对作者本人的尊重。另外,WFG的资源在他那边都是无条件直接可下载的,您搬运到这里后,却变成要回复文章才能得知提取码,似乎有点严格了,或许改成直接公开即可,毕竟现在论坛不比从前,文章少很多了,不用担心被挤下去。

以上浅见,供您参考。{:4_97:}

deeke 发表于 2023-10-14 17:54:08

好用,感谢WFG大佬制作字库、部件检索,感谢eeshu分享转发 :DD

eeshu 发表于 2023-10-14 17:56:39

deeke 发表于 2023-10-14 17:54
好用,感谢WFG大佬制作字库、部件检索,感谢eeshu分享转发 :DD

哟,老兄神隐多年哦。

RickVincent 发表于 2023-10-14 20:42:02

Thanks for sharing...

文曲星 发表于 2023-10-14 21:34:39

谢谢楼主

nanhw 发表于 2023-10-14 21:53:58

向伟大的先行者致敬!

TJV 发表于 2023-10-14 22:34:46

谢谢分享好资源

人在上海 发表于 2023-10-15 00:28:18

虽然一般用不到……,谢谢更新分享!

shuitu 发表于 2023-10-15 07:08:34

造福读书人,功德无量!

caili945 发表于 2023-10-15 07:40:44

这么好的,感谢分享

transport 发表于 2023-10-15 08:52:05

下来看看,谢谢你

jonah_w 发表于 2023-10-15 09:37:53

感谢分享

五行山猴子 发表于 2023-10-15 10:02:01

哗,工程庞大,实属难得。辛苦了。

uoneat 发表于 2023-10-15 10:18:23

感谢楼主分享!

稻田里有只池鹭 发表于 2023-10-15 10:28:13

感谢大佬!

zuishi 发表于 2023-10-15 10:55:19

感谢分享,兄台辛苦。

csmpaul 发表于 2023-10-15 12:04:25

谢谢分享,兄台辛苦。

Explorer0724 发表于 2023-10-15 13:25:12

感谢楼主分享!辛苦

ypddd 发表于 2023-10-15 15:24:19

谢谢分享全宋字和部件检索重大更新!

hsjmshen 发表于 2023-10-15 15:56:27

谢谢分享!

tonyno1 发表于 2023-10-15 17:58:46

谢谢LZ分享!!!

shadowfiend 发表于 2023-10-15 19:03:45

有心人,所有人的福分。
页: [1] 2
查看完整版本: (20231011)全宋体和部件检索重大更新