成为VIP会员查看完整内容
VIP会员码认证
首页
主题
会员
服务
注册
·
登录
Spark
关注
51
Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架,Spark,拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是Job中间输出结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。
综合
百科
VIP
热门
动态
论文
精华
Do LLMs have core beliefs?
Arxiv
0+阅读 · 10月14日
Data-Efficient ConvNeXt Pretraining for High-Resolution Sentinel-1 GRD SAR Representation Learning
Arxiv
0+阅读 · 10月15日
SPARK: Learning from Verification in Speculative GRPO Rollouts
Arxiv
0+阅读 · 10月14日
SPARK: Adaptive Parametric Knowledge Participation for Faithful Retrieval-Augmented Generation
Arxiv
0+阅读 · 10月13日
Sequential Planning via Anchored Robotic Keypoints
Arxiv
0+阅读 · 10月12日
Vela: User Behavior as Supervision Sparks LLM Intelligence
Arxiv
0+阅读 · 10月10日
With a Thermomix You Lose the Ability to Cook: A Kitchen Machine Analogy for Applications of Generative AI in Education
Arxiv
0+阅读 · 9月9日
Inspector: Conversational and Lightweight Analyzer of Analog Circuit Layouts Using LLM and CNNs
Arxiv
0+阅读 · 9月28日
CacheTrap: Unveiling a Stealthier Gray-Box Trojan against LLMs
Arxiv
0+阅读 · 9月15日
TreeRedux: Separating Concerns in Spark's Distributed Tree Aggregation
Arxiv
0+阅读 · 9月7日
Beyond Marginal Monitoring: Distributed Joint-Distribution Testing for Data Concept Drift in Large Scale E-Commerce Operations
Arxiv
0+阅读 · 10月6日
DISCO: Distributed Long Context Scaling with Grounding-Reasoning Disaggregation
Arxiv
0+阅读 · 9月27日
SPARK: Skeleton-Guided Reasoning Synthesis from Large-Scale Scientific Literature
Arxiv
0+阅读 · 8月31日
MultivationBench: A Benchmark for Multimodal Sequential Motivation Reasoning
Arxiv
0+阅读 · 8月29日
Man, Machine, and Masterpiece: Artistic Ownership in the AI Era
Arxiv
0+阅读 · 7月16日
参考链接
提示
微信扫码
咨询专知VIP会员与技术项目合作
(加微信请备注: "专知")
微信扫码咨询专知VIP会员
Top