A collection of random ideas so I don't have to google again
© 2018 - 2023 A collection of random ideas so I don't have to google again
Apache Hadoop Stack: MapReduce, Pig, Spark, Hive
Apache Hadoop Stack: MapReduce, Pig, Spark, Hive 1. HDFS CLI: load input data list all directories hadoop fs -ls make a new directory to store movie data hadoop fs -mkdir movieData copy data file from local to hdfs hadoop fs -copyFromLocal u.data movieData/u.data 2. MapReduce with Python: movies sorted by rating counts script from mrjob.job import MRJob from mrjob.step import MRStep class RatingsBreakdown(MRJob): def steps(self): return [ MRStep(mapper=self.mapper_get_movie, combiner=self.combiner_count_ratings, reducer=self.reducer_count_ratings), MRStep(reducer=self.
6 minutes read
关于我
g1eny0ung 的 ❤️ 博客
记录一些 🌈 生活上，技术上的事
一名大四学生
马上（已经）毕业于 🏫 大连东软信息学院
职业是前端工程师
业余时间会做开源和 Apple App (OSX & iOS)
主要的技术栈是：
- JavaScript & TypeScript
- React.js
- Electron
- Rust
写着玩（写过）：
- Java & Clojure & CLJS
- OCaml & Reason & ReScript
- Dart & Swift
目前在 PingCAP 工作
– 2020 年 09 月 09 日更新
我的一些开源项目
- Petal 🌺 ➡️ 豆瓣 FM 桌面版
- hugo-theme-dream 🌱 ➡️ HUGO 的博客主题，当然，也是你现在看到的博客主题
- Alfred-Colors-workflow ➡️ Alfred 插件：CSS 颜色格式转换 hex <=> rgb <=> hsl
- github-colorful-contributions-graph ➡️ 改变 GitHub 贡献面板颜色的 Chrome 插件
- day.dart ➡️ ⏰ Day.js in dart.
其他
如果你喜欢我的开源项目或者它们可以给你带来帮助，可以赏一杯咖啡 ☕ 给我。~
If you like my open source projects or they can help you. You can buy me a coffee ☕.~
PayPal：
Patreon:
微信赞赏码：
最好附加一下信息或者留言，方便我可以将捐助记录 📝 下来，十分感谢 🙏。
It is better to attach some information or leave a message so that I can record the donation 📝, thank you very much 🙏.