没有合适的资源?快使用搜索试试~ 我知道了~
gcp-ingestion:Google Cloud Platform上遥测摄取的文档和实施
共453个文件
java:183个
py:50个
json:44个
需积分: 5 0 下载量 54 浏览量
2021-04-01
03:05:43
上传
评论
收藏 772KB ZIP 举报
温馨提示
Google Cloud Platform上的遥测提取 用于部署和部署到Google Cloud Platform(GCP)的Mozilla遥测摄取系统的文档和实现的Monorepo。 当前有四个组成部分: :一种简单的Python服务,用于接受HTTP消息并将其传递到Google Cloud Pub / Sub :一个Java模块,定义作业以对接收的消息进行流式传输和批量转换 :一个运行在Kubernetes中的Java应用程序,可从Google Cloud Pub / Sub读取输入并将记录发送到GCS或BigQuery之类的输出 :Java模块,用于在摄取波束和摄取接收器之间共享代码 有关更多信息,请参见。 Beam 11 SDK正在进行Java 11支持,因此该项目需要Java8。已配置Maven在使用较新版本的JDK时针对Java 8进行编译,但仅保证对JDK 8
资源推荐
资源详情
资源评论
收起资源包目录
gcp-ingestion:Google Cloud Platform上遥测摄取的文档和实施 (453个子文件)
test.1.bq 2KB
foo.1.bq 201B
bar.1.bq 199B
build 213B
build-template 3KB
checkstyle 14B
checkstyle 14B
checkstyle 14B
copy-bq-schemas 1KB
mps-diff-integration.csv 7KB
word_4.csv 2KB
alphanum_3.csv 224B
osUserAgentList.csv 138B
urlAllowlist.csv 59B
countryIpList.csv 34B
Dockerfile 1KB
Dockerfile 816B
.dockerignore 136B
download-cities15000 580B
download-document-sample 2KB
download-geolite2 1KB
download-schemas 3KB
.flake8 30B
format-markdown 256B
format-python 259B
generate-avro-schemas 3KB
generate-avro-test-resources 5KB
generate-bq-schemas 3KB
generate-jwk-pair 1KB
.gitignore 123B
.gitignore 96B
.gitignore 93B
test-schema.tar.gz 389B
test_telemetry_snappy.heka 55KB
crashping.heka 38KB
test_snappy.heka 2KB
main.html 64B
requirements.in 455B
pytest.ini 977B
.pydocstyle.ini 63B
PubsubMessageToObjectNodeBeamTest.java 34KB
PubsubMessageToObjectNode.java 33KB
SinkConfig.java 27KB
MessageScrubberTest.java 27KB
Write.java 24KB
BigQueryIntegrationTest.java 24KB
GuidedJsonDecoder.java 17KB
ParseUriTest.java 16KB
DecryptPioneerPayloadsTest.java 15KB
SinkOptions.java 15KB
ParsePayload.java 15KB
PubsubMessageRecordFormatterTest.java 15KB
DecoderMainTest.java 13KB
ParseUri.java 13KB
DecryptRallyPayloadsTest.java 13KB
MessageScrubber.java 13KB
PubsubMessageToObjectNodeSinkTest.java 12KB
ParseReportingUrl.java 12KB
GeoCityLookup.java 11KB
PubsubIntegrationTest.java 11KB
SinkBigQueryIntegrationTest.java 11KB
DecryptRallyPayloads.java 10KB
KeyStoreIntegrationTest.java 10KB
NestedMetadata.java 10KB
BatchWrite.java 9KB
ParseUserAgent.java 9KB
ParsePayloadTest.java 9KB
SinkAvroTest.java 9KB
DecryptPioneerPayloads.java 9KB
BigQuery.java 9KB
KeyByBigQueryTableDestination.java 8KB
NestedMetadataTest.java 8KB
NormalizeAttributes.java 8KB
BigQueryWriteTest.java 8KB
Read.java 7KB
Json.java 7KB
ParseUserAgentTest.java 7KB
GeoCityLookupTest.java 7KB
PubsubTopics.java 7KB
SchemaStore.java 7KB
RepublisherMainTest.java 7KB
SinkMainTest.java 6KB
ParseReportingUrlTest.java 6KB
GeoIspLookup.java 6KB
DynamicPathTemplate.java 6KB
PubsubMessageToTableRow.java 6KB
ErrorOutputType.java 6KB
ParseProxyTest.java 6KB
PioneerBenchmarkGenerator.java 6KB
HashClientInfo.java 6KB
Gcs.java 5KB
FileWindowingTest.java 5KB
Pubsub.java 5KB
NormalizeAttributesTest.java 5KB
StorageIntegrationTest.java 5KB
ParseLogEntry.java 5KB
PubsubConstraints.java 5KB
KeyStore.java 5KB
Decoder.java 5KB
SinkPubsubLiteIntegrationTest.java 5KB
共 453 条
- 1
- 2
- 3
- 4
- 5
资源评论
iwbunny
- 粉丝: 27
- 资源: 4671
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功