引用/借喻

• Error in start_shell(master = master, spark_home = spark_home, spark_version = version, : Failed to find 'spark-submit2.cmd' under 'C:\Users\Owner\AppData\Local\spark\spark-3.0.0-bin-hadoop2.7', please verify - SPARK_HOME. englianhu/binary.com-interview-question#1
  use sparklyr but believe dataset not high-volume, will apply to HFT in https://github.com/englianhu/binary.com-interview-question

> microbenchmark(
+     spark = 
+         smp2_sc %>% 
+             ml_linear_regression(Profit ~ .), 
+     normal = lm(Profit ~., smp2))
Unit: milliseconds
   expr       min         lq       mean    median        uq       max neval
  spark 3213.3874 3416.97000 3620.63197 3558.2209 3774.3810 5413.4950   100
 normal   24.5953   27.57015   29.66484   28.7103   30.0822   87.2707   100
> microbenchmark(
+     spark = 
+         smp2_sc %>% 
+             ml_linear_regression(Profit ~ .), 
+     normal = lm(Profit ~., smp2))
Unit: milliseconds
   expr       min         lq       mean     median         uq       max neval
  spark 3223.9533 3372.34675 3512.10774 3491.44990 3589.48430 4277.6933   100
 normal   25.6651   27.14775   28.81245   28.06895   29.51575   49.0671   100

here's reference to speed up lm:

• https://rpubs.com/maechler/fast_lm
• https://stackoverflow.com/questions/25416413/is-there-a-faster-lm-function

• Originally posted by @englianhu in I tried to model few linear mixed models... englianhu/ali-zonghui#9 (comment)

礼逆袭操作系统（高频量化对冲）

linux需要多大读写速度的硬盘？
争议一般6-10g，建议20g以上。 由于linux的内核的来源是一样的， 但由于发行版本不同，具体需要磁盘大小看具体系统需求。 linux内核比较小, 安装系统其实用不了多大的磁盘空间，不像max os和windows 。为了获得完整的用户体验, 建议磁盘空间保证在20g以上，如果需要安装很多软件和服务，那么自然就要扩大磁盘容量了。当然也可以在系统装好之后扩充磁盘容量, 但为了避免麻烦和数据损失, 建议在安装时多分一点儿空间。

linux磁盘读写最大支持多少？
linux磁盘读写速度是由磁盘类型决定的，机械硬盘最大在7500转/秒，sata固态最大在6G/S，而m2固态可达到10G/S。

• Linux C获取系统时间秒/毫秒/微秒/纳秒
• linux下的定时或计时操作（gettimeofday等的用法，秒，微妙，纳秒
• linux速度测试（linux 速度）
• Linux时间子系统之（一）：时间的基本概念
• 如何获取linux系统时间，精确到秒或毫秒或微妙或纳秒？
• Linux时钟精度：毫秒？微妙？纳秒？
• 51CTO - linux 纳秒
• 51CTO - linux时间 纳秒
• CSDN - Linux内核中的延时函数详解
• CSDN - Linux 内核定时器

相关文献

• https://github.com/englianhu/library/issues/3
• REmap🐾百度绘图，🌟点缀全球 r-world#1
• 🚩🇨🇳🏹🦔中科红旗 RedFlag Linux (🍥Debian) owner#4
• 🚩🇨🇳🏹中科红旗 RedFlag Linux (🍥Debian) setup-centOS7-DO#2
• system.time()比较dir()和list.files()的效率 englianhu/binary.com-interview-question-data#3