没有合适的资源?快使用搜索试试~ 我知道了~
data-validator:验证围绕Apache Spark构建的数据的工具
共90个文件
scala:69个
md:5个
sbt:4个
需积分: 13 0 下载量 16 浏览量
2021-05-06
11:07:46
上传
评论
收藏 120KB ZIP 举报
温馨提示
数据验证器 验证HIVE表中数据的工具。 用法 组装脂肪罐: sbt clean assembly spark-submit --master local data-validator-assembly-0.10.0.jar --help data-validator v0.10.0 Usage: data-validator [options] --version --verbose Print additional debug output. --config <value> required validator config .yaml filename, prefix w/ 'classpath:' to load configuration from JVM classpath/resources, ex. '--co
资源推荐
资源详情
资源评论
收起资源包目录
data-validator-master.zip (90个子文件)
data-validator-master
.gitignore 99B
COPYRIGHT 39B
Makefile 326B
project
plugins.sbt 180B
build.properties 20B
assembly.sbt 57B
src
main
resources
log4j-dv-spark.properties 1KB
scala
com
target
data_validator
Substitutable.scala 1002B
JsonUtils.scala 2KB
ConfigParser.scala 2KB
EnvironmentVariables.scala 2KB
EventLog.scala 446B
Main.scala 7KB
EventGenerator.scala 101B
ConfigVar.scala 4KB
ValidatorTable.scala 11KB
JsonEncoders.scala 6KB
VarSubstitution.scala 6KB
validator
NullCheck.scala 1KB
ColStats.scala 4KB
RowBased.scala 4KB
StringRegexCheck.scala 3KB
NegativeCheck.scala 2KB
UniqueCheck.scala 2KB
RangeCheck.scala 5KB
StringLengthCheck.scala 4KB
ValidatorBase.scala 9KB
TwoPassCheapCheck.scala 870B
ColumnBased.scala 6KB
JsonDecoders.scala 2KB
ColumnSumCheck.scala 6KB
ValidatorOutput.scala 3KB
ValidatorConfig.scala 4KB
Emailer.scala 6KB
Reports.scala 2KB
GenTestData.scala 1KB
stats
FirstPassStats.scala 842B
Bin.scala 109B
Histogram.scala 78B
SecondPassStats.scala 996B
CompleteStats.scala 1KB
FirstPassStatsAggregator.scala 3KB
SecondPassStatsAggregator.scala 4KB
HTMLBits.scala 364B
ValidatorEvent.scala 3KB
ExpressionUtils.scala 699B
IO.scala 9KB
test
resources
test_config.yaml 683B
scala
com
target
TestingSparkSession.scala 1KB
data_validator
ValidatorTableSpec.scala 8KB
validator
ColStatsSpec.scala 3KB
ConfigVarSpec.scala 6KB
TestHelpersSpec.scala 2KB
ColumnSumCheckSpec.scala 12KB
StringRegexCheckSpec.scala 10KB
RangeCheckSpec.scala 13KB
NullCheckSpec.scala 4KB
Mocker.scala 728B
UniqueCheckSpec.scala 4KB
StringLengthCheckSpec.scala 17KB
RowBasedSpec.scala 7KB
NegativeCheckSpec.scala 5KB
ColumnBasedSpec.scala 6KB
ValidatorBaseSpec.scala 7KB
ConfigParserSpec.scala 3KB
TestHelpers.scala 2KB
JsonUtilsSpec.scala 4KB
EnvironmentVariablesSpec.scala 988B
ConfigVarSubSpec.scala 4KB
IOSpec.scala 4KB
stats
NumericData.scala 826B
SecondPassStatsAggregatorSpec.scala 1KB
FirstPassStatsAggregatorSpec.scala 1KB
ValidatorOutputSpec.scala 793B
VarSubstitutionSpec.scala 3KB
EmailerSpec.scala 7KB
ExpressionUtilsSpec.scala 861B
bin
sbt 20KB
.travis.yml 1KB
CONTRIBUTING.md 2KB
CODE_OF_CONDUCT.md 3KB
LICENSE 564B
.github
CODEOWNERS 53B
ISSUE_TEMPLATE
new_check.md 813B
PULL_REQUEST_TEMPLATE
new_check.md 1KB
stale.yaml 956B
scalastyle-config.xml 9KB
README.md 24KB
NOTICE 2KB
build.sbt 2KB
共 90 条
- 1
资源评论
男爵兔
- 粉丝: 45
- 资源: 4591
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
- Gradle,Maven 插件将 Java 应用程序打包为原生 Windows、MacOS 或 Linux 可执行文件并为其创建安装程序 .zip
- Google Maps API Web 服务的 Java 客户端库.zip
- Google Java 核心库.zip
- GitBook 教授 Javascript 编程基础知识.zip
- Generation.org 开发的 JAVA 模块练习.zip
- FastDFS Java 客户端 SDK.zip
- etcd java 客户端.zip
- Esercizi di informatica!执行计划,metti alla prova!.zip
- Eloquent JavaScript 翻译 - 2ª edição .zip
- Eclipse Paho Java MQTT 客户端库 Paho 是一个 Eclipse IoT 项目 .zip
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功