เทนเซอร์โฟลว์:: ปฏิบัติการ:: StringNGrams

สร้าง ngrams จากข้อมูลสตริงที่ขาดหายไป

สรุป

สหกรณ์นี้ยอมรับเทนเซอร์ที่ขาด 1 มิติที่มีเพียงสตริง และส่งออกเทนเซอร์ที่ขาด 1 มิติที่มี ngrams ของสตริงนั้น เชื่อมต่อกันตามแกนในสุด

ข้อโต้แย้ง:

• ขอบเขต: วัตถุ ขอบเขต
• data: ค่าเทนเซอร์ของเทนเซอร์สตริงที่ขาดเพื่อสร้าง ngrams ต้องเป็นเทนเซอร์สตริง 1D
• data_splits: การแยกเทนเซอร์ของสตริงเทนเซอร์ที่ขาดเพื่อสร้าง ngrams
• ตัวคั่น: สตริงที่จะต่อท้ายระหว่างองค์ประกอบของโทเค็น ใช้ "" โดยไม่มีตัวคั่น
• ngram_widths: ขนาดของ ngrams ที่จะสร้าง
• left_pad: สตริงที่ใช้เพื่อวางด้านซ้ายของลำดับ ngram ใช้เฉพาะเมื่อ pad_width != 0
• right_pad: สตริงที่ใช้เพื่อวางด้านขวาของลำดับ ngram ใช้เฉพาะเมื่อ pad_width != 0
• pad_width: จำนวนองค์ประกอบการเสริมที่จะเพิ่มลงในแต่ละด้านของแต่ละลำดับ โปรดทราบว่าช่องว่างภายในจะไม่มากกว่า 'ngram_widths'-1 โดยไม่คำนึงถึงค่านี้ หาก pad_width=-1 ให้เพิ่มองค์ประกอบ max(ngram_widths)-1

ผลตอบแทน:

• เอ็นแกรม Output : ค่าเทนเซอร์ของเอาท์พุต ngrams เทนเซอร์ที่ขาดหาย
• Output ngrams_splits: เทนเซอร์แยกของเอาท์พุต ngrams เทนเซอร์ที่ขาดหาย

คุณลักษณะสาธารณะ

::tensorflow::Output ngrams

::tensorflow::Output ngrams_splits

Operation operation

 StringNGrams(
  const ::tensorflow::Scope & scope,
  ::tensorflow::Input data,
  ::tensorflow::Input data_splits,
  StringPiece separator,
  const gtl::ArraySlice< int > & ngram_widths,
  StringPiece left_pad,
  StringPiece right_pad,
  int64 pad_width,
  bool preserve_short_sequences
)