• 请不要在回答技术问题时复制粘贴 AI 生成的内容
kaiser1992
V2EX  ›  程序员

大文件排序问题

  •  
  •   kaiser1992 · Dec 18, 2017 · 2420 views
    This topic created in 3161 days ago, the information mentioned may be changed or developed.
    现在有一个文本,包括 5000W 行,每行由拼音+ID 组成,现在要求按照拼音字母的顺序把这个文件进行重新排序。
    V 友们有什么想法呢?支个招~
    5 replies    2017-12-19 10:30:50 +08:00
    owenliang
        1
    owenliang  
       Dec 18, 2017 via Android
    外排序呗 还能咋地
    BBCCBB
        2
    BBCCBB  
       Dec 18, 2017
    读出来,放 redis 里,用 redis 排序,
    kaiser1992
        3
    kaiser1992  
    OP
       Dec 19, 2017
    @owenliang 字符串排序,略显慢啊
    gouchaoer
        4
    gouchaoer  
       Dec 19, 2017
    插入数据库,加上索引,然后通过 a~z 的顺序 select 出来
    gouchaoer
        5
    gouchaoer  
       Dec 19, 2017
    导入 hive,然后 select 出来
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2713 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 32ms · UTC 01:06 · PVG 09:06 · LAX 18:06 · JFK 21:06
    ♥ Do have faith in what you're doing.