没有合适的资源?快使用搜索试试~ 我知道了~
spark-testing-base:使用Spark编写测试时要使用的基类
共98个文件
scala:60个
py:13个
java:6个
需积分: 13 1 下载量 69 浏览量
2021-05-04
15:54:48
上传
评论
收藏 140KB ZIP 举报
温馨提示
火花测试基础 使用Spark编写测试时要使用的基类。 为什么? 您已经在Spark中编写了一个很棒的程序,现在是时候编写一些测试了。 只有您自己发现自己编写代码来设置和拆除本地模式,然后在每个套件之间对自己说:这不是我漂亮的代码。 如何? 因此,您包括com.holdenkarau.spark-testing-base [spark_version] _1.0.0,并扩展其中一个类并编写一些简单的测试。 例如,将其包含在使用Spark 3.0.0的项目中: " com.holdenkarau " %% " spark-testing-base " % " 3.0.0_1.0.0 " % " test " 或者 <dependency> <groupId>com.holdenkarau</groupId> <artifactId>spark-testing-base_2.11</
资源推荐
资源详情
资源评论
收起资源包目录
spark-testing-base-master.zip (98个子文件)
spark-testing-base-master
.travis.yml 2KB
kafka-0.8
src
test
scala
com
holdenkarau
spark
testing
kafka
KafkaTestUtilsTest.scala 3KB
main
scala
org
apache
spark
streaming
kafka
KafkaTestUtils.scala 8KB
core
src
test
2.0
java
com
holdenkarau
spark
testing
SampleJavaStreamingTest.java 4KB
SampleJavaDatasetTest.java 8KB
BasicMagic.java 503B
SampleJavaRDDTest.java 4KB
scala
com
holdenkarau
spark
testing
SampleScalaCheckTest.scala 13KB
SampleDatasetTest.scala 6KB
SampleDataFrameTest.scala 7KB
PerfSampleTest.scala 2KB
MLScalaCheckTest.scala 1KB
SampleMiniClusterTest.scala 1KB
SampleDatasetGeneratorTest.scala 2KB
YARNClusterTest.scala 1KB
DatasetGeneratorSizeSpecial.scala 2KB
ArtisinalStreamingTest.scala 3KB
HDFSClusterTest.scala 2KB
SampleStreamingTest.scala 6KB
PerTestSampleTest.scala 1KB
MultipleDataFrameSuites.scala 194B
PerTestSparkContextTest.scala 2KB
PrettifyTest.scala 3KB
SampleRDDTest.scala 6KB
UtilsTest.scala 2KB
SampleStreamingActionTest.scala 2KB
2.2
scala
com
holdenkarau
spark
testing
StructuredStreamingSampleTests.scala 909B
main
2.0
java
com
holdenkarau
spark
testing
SharedJavaSparkContext.java 2KB
scala
com
holdenkarau
spark
testing
PerfListener.scala 2KB
SharedMiniCluster.scala 2KB
DatasetGenerator.scala 4KB
StreamingActionBase.scala 4KB
WrappedConfVar.scala 1KB
DatasetSuiteBase.scala 2KB
SparkContextProvider.scala 2KB
MLUserDefinedType.scala 1KB
RDDGenerator.scala 6KB
StreamingSuiteBase.scala 9KB
Logging.scala 0B
RDDComparisons.scala 5KB
HDFSCluster.scala 886B
JavaStreamingSuitebase.scala 8KB
SharedSparkContext.scala 2KB
JavaDataFrameSuiteBase.scala 238B
Utils.scala 8KB
StreamingSuiteCommon.scala 9KB
DataFrameSuiteBase.scala 9KB
LocalSparkContext.scala 2KB
Prettify.scala 1KB
JavaRDDComparisons.scala 2KB
TestInputStream.scala 2KB
YARNCluster.scala 8KB
DataframeGenerator.scala 6KB
TestSuite.scala 2KB
JavaSuiteBase.scala 2KB
PerTestSparkContext.scala 1KB
org
apache
spark
streaming
TestManualClock.scala 2KB
dstream
FriendlyInputDStream.scala 1KB
TestStreamingContext.scala 2KB
sql
EvilSessionTools.scala 216B
Loggign.scala 973B
SparkUtils.scala 156B
2.4_2.12
java
testing
SharedJavaSparkContext.java 2KB
pre-2.2_2.11
scala
org
apache
spark
EvilSparkContext.scala 789B
resources
log4j.properties 284B
2.2
scala
com
holdenkarau
spark
testing
StructuredStreamingBase.scala 2KB
org
apache
spark
EvilSparkContext.scala 179B
.github
FUNDING.yml 141B
RELEASE_NOTES.md 2KB
python
sparktestingbase
utils.py 1KB
test
simple_test.py 3KB
simple_sql_test.py 4KB
reuse_spark_context_test.py 1KB
__init__.py 47B
helloworld_test.py 1KB
simple_streaming_test.py 3KB
streamingtestcase.py 5KB
testcase.py 4KB
__init__.py 1KB
sqltestcase.py 3KB
pathmagic.py 186B
run-tests 723B
setup.py 545B
MANIFSET.in 50B
LICENSE.txt 11KB
LICENSE 11KB
mini-cross-build.pl 883B
CONTRIBUTING.md 361B
src
main
2.0
scala
org
apache
spark
Logging.scala 973B
build.sbt 8KB
.gitignore 1KB
.codecov.yml 218B
scalastyle-config.xml 6KB
CODE_OF_CONDUCT.md 3KB
project
plugins.sbt 355B
build.properties 18B
README.md 3KB
log4j
log4j.properties 2KB
共 98 条
- 1
资源评论
悦微评剧
- 粉丝: 18
- 资源: 4669
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功