V2EX › yangxin0 的所有回复 › 第 3 页 / 共 70 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 2 3 4 5 6 7 8 9 10 ... 70

❮

❯

256 天前

回复了 drymonfidelia 创建的主题 › 程序员 › 要对单个 6.20TB 的超大 csv 文件保持顺序的情况下进行去除重复行，有什么好思路？显然不可能加载进内存

分治：
1 、用空间换时间（计算）
2 、用时间（计算）换空间

针对（ 1 ）有 spark 集群很快的，如果预算有限那么方法（ 2 ）：
1 、把数据分成 N 块，并针对 N 块内进行去重
2 、从 n 块中取一块，和剩下的 n-1 块去重，取这一块建立 hash or map 都可以，n-1 按照顺序读取
3 、从剩下的 n-1 块中又进行步骤（ 2 ），直到 n=0
4 、经过上述思路处理的 csv 就包含重复

261 天前

回复了 qingshui33 创建的主题 › 生活 › 你有哪些 [这钱花的是真冤，真后悔] 的瞬间

我的 iPhone 贷款了 2 年，终于要还完了，抢首发其实真不好，等几个月真香。

298 天前

回复了 xboxv 创建的主题 › 奇思妙想 › 给大佬提个真实刚性需求（感觉可做副业）关于 html 网页标记浏览器插件方向

Save As PDF and Annotate

330 天前

回复了 foru17 创建的主题 › 问与答 › 我的老婆确诊肺癌,希望能得到你的帮助

感谢

330 天前

回复了 foru17 创建的主题 › 问与答 › 我的老婆确诊肺癌,希望能得到你的帮助

老哥，看了你的帖子，我说实话被吓住了，回去就去医院检查肺结节。

342 天前

回复了 suqiuluck 创建的主题 › Windows › AI 需求，主机配置推荐， 2024 年准备 all in AI

all in AI 至少 4090 起步吧，你这个配置最多 all in AI 学习。

346 天前

回复了 Marionxue 创建的主题 › Windows › 作为程序员，日常使用 window 工作本，你们都会安利哪些好用的工具，推荐一波

笔记本：Mac ，台式机：PC

360 天前

回复了 feiwu2001 创建的主题 › 酷工作 › 24 本科应届毕业生，求指点

作为面试官，我希望从年轻候选人简历里面看到潜力：学习能力、解决问题能力、社交能力。框架这些在工作的环境里面很快就能用得很熟练，通常我在面试里面不会刻意考察编程能力、框架的使用。

从你的简历里面能够看出：
1 、你毕业学校不是很好
2 、你的专业技能里面只是使用过一些框架和工具
3 、英语水平较低&代码能力一般

所以你的简历很难在中大厂的筛选里面突出重围，建议重点关注一些小厂先在深圳有一份工作，然后再去寻找属于你的机会。

360 天前

回复了 IdJoel 创建的主题 › iPhone › 新买的 iPhone 15，吐槽一下这个极其极其不好用的 FaceID

你是不是贴了膜？

361 天前

回复了 Yeo0o 创建的主题 › 广州 › 广州到深圳来回，有没有快捷便宜的通行方案

自己开车？

2024-02-05 11:03:10 +08:00

回复了 SuperXX 创建的主题 › macOS › MacOS 上最快的搜索工具: PathFinder (Finder 替代品) 打折了仅需$4.99

raycast 免费的

2024-02-02 19:39:20 +08:00

回复了 adpw001 创建的主题 › 计算机 › ThinkBook 14 2024 拔掉电源降频导致卡顿严重

要用 windwos 就别用笔记本，笔记本只能买 mac

2024-01-22 13:05:24 +08:00

回复了 fengleelogos 创建的主题 › 酷工作 › 深圳高新园地铁站智能硬件公司 8-15k 求 2-5 年的 go/ Python /nodejs 后端两位

看到楼主的招聘挺感触，我这边看到的视角 3-5 年工作经验的 CRUD 的确没啥区别了，现在基础设施、框架都非常完善了，只能说中国互联网黄金时代过去了。

1 2 3 4 5 6 7 8 9 10 ... 70

❮

❯