Граф коммитов

117 Коммитов

Автор SHA1 Сообщение Дата
Taku Kudo 721296164f
Update README.md 2018-04-09 19:00:21 +09:00
Taku Kudo ecbd55ac54
Merge pull request #53 from google/sr
Support to change ids of <unk>, <s>, </s>
2018-04-09 18:44:57 +09:00
Taku Kudo d102897496 Support to change ids of <unk>, <s>, </s> 2018-04-09 17:47:42 +09:00
Taku Kudo f75834c167
Update README.md 2018-04-02 09:08:43 +09:00
Taku Kudo ddd8d6fe50
Merge pull request #51 from dongjinleekr/feature/readme-ubuntu-libprotobuf
Provide detailed instructions for installing the protobuf library
2018-04-01 23:47:27 +09:00
Lee Dongjin 0587b3954f Update README.md: provide detailed instruction for installing protobuf library on Ubuntu. 2018-04-01 23:24:16 +09:00
Taku Kudo 1ff5904e66
Merge pull request #50 from tetsuok/remove-unused-vars
Remove unused variables
2018-04-01 01:27:43 +09:00
Tetsuo Kiso 4256fc30b7 Remove unused variables 2018-03-30 23:59:31 -07:00
Taku Kudo ea41f40341
Merge pull request #48 from tetsuok/fix-default-vocab-size
Fix inconsistent default vocab size
2018-03-29 23:04:08 +09:00
Taku Kudo 86f50ac3da
Merge pull request #49 from tetsuok/fix-dup-controls
Fix typo in examples of control symbols
2018-03-29 23:03:33 +09:00
Tetsuo Kiso 9f3bc53f75 Fix typo in examples of control symbols 2018-03-29 01:07:25 -07:00
Tetsuo Kiso ca20a5a9e9 Fix inconsistent default vocab size 2018-03-28 23:47:55 -07:00
Taku Kudo c08f9c1d1d
Update README.md 2018-03-01 14:41:26 +09:00
Taku Kudo 8ff70f28bd
Merge pull request #46 from google/sr
Updated document
2018-02-28 22:11:10 +09:00
Taku Kudo 017ba49151 Updated document 2018-02-28 20:56:07 +09:00
Taku Kudo 9c495ef504
Merge pull request #45 from google/sr
Added SentencePieceTrainer class
2018-02-28 20:21:27 +09:00
Taku Kudo 45b4527117 Added SentencePieceTrainer class 2018-02-28 19:54:11 +09:00
Taku Kudo 6445aa2b17
Merge pull request #44 from google/sr
Add Sample/NBestEncode
2018-02-28 14:50:43 +09:00
Taku Kudo c6a1a19665 Add Sample/NBestEncode 2018-02-28 13:14:52 +09:00
Taku Kudo ab766cbdaa Fixed typo 2017-12-17 17:46:13 +09:00
Taku Kudo a333b6817c Support Unicode string in Python wrapper 2017-12-17 09:51:39 +09:00
Taku Kudo a516db4005
Merge pull request #39 from google/python
Updated Python wrapper. Regenerated with the shell script
2017-11-08 12:28:10 +09:00
Taku Kudo 0489dcc28c Updated Python wrapper. Regenerated with the shell script 2017-11-08 12:27:24 +09:00
Taku Kudo a8285ee048
Merge pull request #38 from google/ubuntu17
Added make_py_wheel.sh
2017-11-08 12:12:39 +09:00
Taku Kudo e5ab12c9f3 Added make_py_wheel.sh 2017-11-08 11:50:09 +09:00
Taku Kudo 42182b35aa
Merge pull request #37 from google/ubuntu17
Add version tag
2017-11-07 22:43:21 +09:00
Taku Kudo b4ee356ae2 Add version tag 2017-11-07 22:24:18 +09:00
Taku Kudo d7f1acd886
Merge pull request #36 from google/ubuntu17
Enabled to build on Ubuntu 17.10
2017-11-07 18:14:51 +09:00
Taku Kudo 2e3386cbdf Enabled to build on Ubuntu 17.10 2017-11-07 16:55:49 +09:00
Taku Kudo 9258c729bb
Merge pull request #34 from ksudoh/master
Fix an incompatibility problem on setup.py for Python 3.
2017-11-01 16:54:43 +09:00
ksudoh 5e6d667815 Fix an incompatibility problem on setup.py for Python 3. 2017-11-01 15:09:49 +09:00
Taku Kudo 9d82cbddd6
Merge pull request #32 from unnonouno/check-pkgconfig-result
Call sys.exit when pkg-config fails
2017-10-28 19:07:48 +09:00
Yuya Unno d8c21c06f9 Call sys.exit when pkg-config fails 2017-10-28 18:53:35 +09:00
Taku Kudo 6b4daf138f Merge pull request #29 from joelhandwell/patch-1
Fix typo
2017-10-25 15:17:53 +09:00
Taku Kudo 930ead2d2c Merge pull request #30 from dongjinleekr/feature/fix-typo-dncode
Fix typo: dncode -> decode
2017-10-25 15:17:26 +09:00
Lee Dongjin 577b683d07 Fix typo: dncode -> decode 2017-10-24 15:31:00 -07:00
Joel Handwell 38b21d787a Fix typo 2017-10-22 01:47:30 -04:00
Taku Kudo c7606941a3 Merge pull request #26 from tsuchm/master
Fix the incompatibility between Python2 and Python3.
2017-10-13 10:18:50 +09:00
TSUCHIYA Masatoshi 81d794bc61 Merge branch 'master' of github.com:tsuchm/sentencepiece 2017-10-13 09:51:02 +09:00
TSUCHIYA Masatoshi 42e6b4d4e3 Add tests using Japanese model, in order to check Unicode encoding. 2017-10-13 09:49:46 +09:00
TSUCHIYA Masatoshi a5dcf7b9dd Merge remote-tracking branch 'upstream/master' 2017-10-13 08:42:45 +09:00
Taku Kudo 2776aae33c Merge pull request #27 from kant/patch-1
Typo
2017-10-12 16:13:13 +09:00
Darío Hereñú d802fd6ca2 Typo 2017-10-12 00:42:06 -03:00
TSUCHIYA Masatoshi 75695aa1e4 Fix the incompatibility between Python2 and Python3. 2017-10-12 10:53:04 +09:00
Taku Kudo 581f593de2 Update README.md 2017-08-29 22:11:33 +09:00
Taku Kudo cc604ea736 Update README.md 2017-08-29 03:00:11 +09:00
Taku Kudo c81573c14c Added pkg-config script 2017-08-29 00:40:05 +09:00
Taku Kudo 787a9c2cff Update README.md 2017-08-29 00:33:13 +09:00
Taku Kudo 8177dab62b Added Python wrapper 2017-08-29 00:26:23 +09:00
Taku Kudo f56e2aac6a Merge pull request #19 from resec/sentencepiece_processor
std::istream interface for SentencepieceProcessor construction
2017-07-24 12:37:50 +09:00