Home Sign Up Sign In
ylxw
V2EX  ›  问与答

Python 采用 chunk_size 的方式读取 hdfs 数据

  •   
  •   ylxw · Jun 12, 2018 · 1710 views
    This topic created in 2917 days ago, the information mentioned may be changed or developed.
    读取 hdfs 采用 chunk_size 的方式，其块的切分方式采用的是字节的方式，但这种情况会存在将一行数据分割到两个块里，若遇到这种情况，请问怎么处理？
    No Comments Yet
    hdfschunk_size读取切分
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2791 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 09:34 · PVG 17:34 · LAX 02:34 · JFK 05:34
    ♥ Do have faith in what you're doing.