Ep19: SentencePiece: A Simple And Language Independent Subword Tokenizer And Detokenizer For NLP Leading NLP Ninja podcast

Artwork

テクノロジー jojonki

Innehåll tillhandahållet av jojonki. Allt poddinnehåll inklusive avsnitt, grafik och podcastbeskrivningar laddas upp och tillhandahålls direkt av jojonki eller deras podcastplattformspartner. Om du tror att någon använder ditt upphovsrättsskyddade verk utan din tillåtelse kan du följa processen som beskrivs här https://sv.player.fm/legal.

Leading NLP Ninja « »
ep19: SentencePiece: A simple and language independent subword tokenizer and detokenizer for NLP

5+ y ago 37:24

Dela

MP3•Episod hem

Innehåll tillhandahållet av jojonki. Allt poddinnehåll inklusive avsnitt, grafik och podcastbeskrivningar laddas upp och tillhandahålls direkt av jojonki eller deras podcastplattformspartner. Om du tror att någon använder ditt upphovsrättsskyddade verk utan din tillåtelse kan du följa processen som beskrivs här https://sv.player.fm/legal.

第１９回では，Googleが開発したサブワードによるTokenizer/DetokenizerであるSentencePieceを解説しました．
今回紹介した論文はこちらのissueで解説しています．

github.com/jojonki/arXivNotes/issues/186

番組への支援は，こちらからお待ちしております．www.patreon.com/jojonki

--- Support this podcast: https://podcasters.spotify.com/pod/show/lnlp-ninja/support

… continue reading

52 episoder

#テクノロジー #jojonki

Artwork

ep19: SentencePiece: A simple and language independent subword tokenizer and detokenizer for NLP

Leading NLP Ninja

15 subscribers

published 5+ y ago

Dela

MP3•Episod hem

Innehåll tillhandahållet av jojonki. Allt poddinnehåll inklusive avsnitt, grafik och podcastbeskrivningar laddas upp och tillhandahålls direkt av jojonki eller deras podcastplattformspartner. Om du tror att någon använder ditt upphovsrättsskyddade verk utan din tillåtelse kan du följa processen som beskrivs här https://sv.player.fm/legal.

第１９回では，Googleが開発したサブワードによるTokenizer/DetokenizerであるSentencePieceを解説しました．
今回紹介した論文はこちらのissueで解説しています．

github.com/jojonki/arXivNotes/issues/186

番組への支援は，こちらからお待ちしております．www.patreon.com/jojonki

--- Support this podcast: https://podcasters.spotify.com/pod/show/lnlp-ninja/support

… continue reading

52 episoder

#テクノロジー #jojonki

Alla avsnitt

×

Välkommen till Player FM

Player FM scannar webben för högkvalitativa podcasts för dig att njuta av nu direkt. Den är den bästa podcast-appen och den fungerar med Android, Iphone och webben. Bli medlem för att synka prenumerationer mellan enheter.

Lyssna på 500+ ämnen