V2EX › kingmo888 的所有回复 › 第 14 页 / 共 23 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

For Existing Member Sign In

1 ... 6 7 8 9 10 11 12 13 14 15 ... 23

❮

❯

2017 年 6 月 2 日

回复了 kingmo888 创建的主题 › 问与答 › 如何监控一个软件的联网行为？

@kruskal 谢谢，我用 Wireshark 试了试，没法单独监控软件。然后想在虚拟机上尝试一下，发现在虚拟机上找不到网卡。

2017 年 5 月 26 日

回复了 moshou 创建的主题 › 程序员 › 求一个解决方案， excel 每一行的数据，生成一个固定模板，怎么做？

@liangweijia6000 #3 楼正解。

同时，你可以直接使用 pandas 操作 excel。用 word 设计好了模板之后，docx 读进来，替换掉关键字，docx 保存。。

完工。

2017 年 5 月 26 日

回复了 mutelog 创建的主题 › 程序员 › 把 N 个数尽量分成 K 组，使每组数字的和尽量接近

需要几个假设条件吧，比如元素都大于 0，什么的。

假设组内各元素均大于 0.

求均值，超过 N 倍标准差的记作异常值然后先放一边，将剩余的部分在有限数量下（必须得够 k 组）的和是否能最贴近异常值，如果能就先按照这个来，不能异常值就放一边单独一组。

只想到这。。。

学渣献丑

2017 年 5 月 26 日

回复了 mutelog 创建的主题 › 程序员 › 把 N 个数尽量分成 K 组，使每组数字的和尽量接近

哇，感觉彼此联动性好高啊。这个必须有个超棒的算法才行

2017 年 5 月 17 日

回复了 how2ex 创建的主题 › 程序员 › 为什么智能手机能通过网络定位而电脑却不行？

@xyfan 我敢说，你的百度地图 web 是登录状态的。哈哈。而且你手机在你身边。它还是用了你的手机数据

2017 年 5 月 16 日

回复了 quietjosen 创建的主题 › DNS › DNSPod 解析，杭州电信要 10s ?! 💊

LZ 这是什么工具？

2017 年 5 月 15 日

回复了 cuican008 创建的主题 › 程序员 › 各位大神，下载了 200 个文档，上面全是别人广告。求帮忙写个 word 宏，批量删除页眉页脚和最后一页的广告

页眉页脚不是双击就可以修改的吗，而且基本都可以统一修改。个别的比如封面会有差别而已

2017 年 5 月 13 日

回复了 kingmo888 创建的主题 › Python › 这一行 Python 代码，如何更快的提高运算速度？

@EmdeBoas 给梯子就爬一下下（捂脸。。）
不知有否联系方式？我把数据发一份给您？您看能优化到多久的耗时？

2017 年 5 月 13 日

回复了 kingmo888 创建的主题 › Python › 这一行 Python 代码，如何更快的提高运算速度？

@EmdeBoas 已感谢，还是无法大幅解决我的问题（可能我技术渣渣，嘿嘿），但还是感谢。

data 是 pandas 中的 DataFrame 格式数据，牵扯到一个 df 切片的问题。目前我做这样的尝试：

循环之前，a=np.array(data['date'])
循环中，
b=a[a<=end]

index=len(b)

利用其行号来查找：
tmp_data = data.loc[data.index[index-window*251:index],:]

这样速度提升了 8 秒左右。全部循环完差不多 36s+。

2017 年 5 月 13 日

回复了 kingmo888 创建的主题 › Python › 这一行 Python 代码，如何更快的提高运算速度？

@herozhang 这其实是并行中子函数的一部分了。所以并行不再考虑

2017 年 5 月 13 日

回复了 kingmo888 创建的主题 › Python › 这一行 Python 代码，如何更快的提高运算速度？

@O14 感觉瓶颈就是 data 行数实在太大。
@EmdeBoas 并且 date 字段为 str，如果转 np.array,然后查找到匹配的数据集后再转换为 str，中间的时间损耗很大。

2017 年 5 月 13 日

回复了 kingmo888 创建的主题 › Python › 这一行 Python 代码，如何更快的提高运算速度？

@EmdeBoas 你好，数据有 100 多万行

2017 年 5 月 11 日

回复了 kingmo888 创建的主题 › Python › Python 多进程写入的疑问，求助。

@dqw 好奇葩，在 run 下放了一个 hdf5 的读取链接，然后读完就关闭，竟然也会导致子函数出现问题。

2017 年 5 月 11 日

回复了 kingmo888 创建的主题 › Python › Python 多进程写入的疑问，求助。

@dqw 您好，您说的有道理。我做了这样一个测试：
在类 Test 中某个函数比如 mutil_test 内部实现多线程，如果直接在 Test().mutil_test()这种形式，多进程的子函数执行成功。如果把 mutil_test 放到类函数 run 下，执行 Test().run()就无法执行 mutil_test 中多进程调用的子函数。

另外，多进程中无法获取到__name__，但如果我在 init 阶段，复制 self.var1=123123，然后在子函数中打印的话，可以打印出来。

2017 年 5 月 10 日

回复了 kingmo888 创建的主题 › Python › Python 多进程写入的疑问，求助。

@dqw 感谢。打印 self.__name__失败，情形是子进程 while True 下，主进程都结束了。说明打印失败了。。原因是？

2017 年 5 月 10 日

回复了 kingmo888 创建的主题 › Python › Python 多进程写入的疑问，求助。

@dqw 现在的瓶颈是计算应该是。请问线程或进程绑核怎么搞。。

2017 年 5 月 10 日

回复了 kingmo888 创建的主题 › Python › Python 多进程写入的疑问，求助。

@dqw
您看，我的需求是这样的：
数据已经按照类别放到了多个 HDF5 里，其中某个文件是 30G 左右（ d1.h5 ）,其中 d1 里面有 5000 多个 table。

计算逻辑：
一个基类，按照不同的需求分为 N 个子类。
之前是这样的：每一个子类读取 d1.h5，循环读取所有 table，然后计算。

哪种方式更合理呢？谢谢。

2017 年 5 月 10 日

回复了 kingmo888 创建的主题 › Python › Python 多进程写入的疑问，求助。

@dqw 多线程是不是在一个进程之下了？我的需求是有大量的数据需要计算，同时数据还很多（几十 G ），需要迭代计算的。所以运算次数相当之多。

这种情况下，用多线程可以吗？

为了解决 I/O 以及计算耗时问题，已经买了一个带 SSD 的 24 核塔式服务器。

1 ... 6 7 8 9 10 11 12 13 14 15 ... 23

❮

❯