没有合适的资源?快使用搜索试试~ 我知道了~
delta-sharing:用于安全数据共享的开放协议
共78个文件
scala:32个
py:17个
md:5个
需积分: 10 2 下载量 160 浏览量
2021-08-04
14:31:18
上传
评论
收藏 138KB ZIP 举报
温馨提示
Delta 共享:用于安全数据共享的开放协议 是一种用于安全实时交换大型数据集的开放协议,它使组织能够实时共享数据,无论他们使用哪种计算平台。 它是一个简单的,可以安全地共享对部分云数据集的访问,并利用现代云存储系统(例如 S3、ADLS 或 GCS)来可靠地传输数据。 借助 Delta Sharing,访问共享数据的用户可以通过 pandas、Tableau、Apache Spark、Rust 或其他支持开放协议的系统直接连接到共享数据,而无需先部署特定的计算平台。 数据提供者可以一次共享数据集以覆盖广泛的消费者,而消费者可以在几分钟内开始使用数据。 此 repo 包括以下组件: Delta 共享。 Python的连接器:一个Python库实现了三角洲共享协议来读取共享表为数据帧或DataFrames。 连接器:实现 Delta 共享协议以从 Delta 共享服务器读取共享表
资源推荐
资源详情
资源评论
收起资源包目录
delta-sharing-main.zip (78个子文件)
delta-sharing-main
server
src
test
scala
io
delta
sharing
server
TestResource.scala 3KB
config
ServerConfigSuite.scala 5KB
DeltaSharingServiceSuite.scala 21KB
SharedTableManagerSuite.scala 8KB
TestDeltaSharingServer.scala 2KB
standalone
internal
PartitionFilterUtilsSuite.scala 2KB
main
scala
io
delta
sharing
server
config
ServerConfig.scala 7KB
exceptions.scala 2KB
model.scala 2KB
CloudFileSigner.scala 2KB
DeltaSharingService.scala 11KB
util
JsonUtils.scala 2KB
SharedTableManager.scala 5KB
standalone
internal
PartitionFilterUtils.scala 5KB
DeltaSharedTableLoader.scala 7KB
protobuf
protocol.proto 2KB
universal
conf
delta-sharing-server.yaml.template 1KB
spark
src
test
resources
log4j.properties 2KB
scala
io
delta
sharing
spark
DeltaSharingFileProfileProviderSuite.scala 3KB
DeltaSharingFileSystemSuite.scala 2KB
DeltaSharingRestClientSuite.scala 4KB
DeltaSharingSuite.scala 8KB
RemoteDeltaLogSuite.scala 2KB
util
RetryUtilsSuite.scala 2KB
DeltaSharingIntegrationTest.scala 4KB
main
resources
META-INF
services
org.apache.spark.sql.sources.DataSourceRegister 45B
org.apache.hadoop.fs.FileSystem 45B
scala
io
delta
sharing
spark
DeltaSharingFileSystem.scala 6KB
DeltaSharingClient.scala 11KB
RandomAccessHttpInputStream.scala 7KB
RemoteDeltaLog.scala 13KB
model.scala 2KB
DeltaSharingDataSource.scala 3KB
DeltaExchangeProfileProvider.scala 3KB
util
RetryUtils.scala 2KB
JsonUtils.scala 1KB
InMemoryHttpInputStream.scala 2KB
.github
workflows
build-and-test.yml 3KB
version.sbt 41B
python
requirements-dev.txt 214B
delta_sharing
rest_client.py 8KB
tests
test_rest_client.py 12KB
test_profile.json 148B
conftest.py 3KB
test_reader.py 9KB
__init__.py 603B
test_protocol.py 6KB
test_delta_sharing.py 6KB
test_converter.py 2KB
__init__.py 930B
protocol.py 5KB
converter.py 5KB
version.py 631B
reader.py 4KB
delta_sharing.py 6KB
dev
lint-python 8KB
tox.ini 728B
pytest 1KB
reformat 1KB
setup.py 3KB
README.md 1KB
CONTRIBUTING.md 4KB
build.sbt 7KB
examples
open-datasets.share 148B
python
quickstart_spark.py 2KB
quickstart_pandas.py 2KB
README.md 758B
.gitignore 1KB
scalastyle-config.xml 20KB
PROTOCOL.md 30KB
project
plugins.sbt 1KB
build.properties 620B
README.md 16KB
.gitattributes 53B
LICENSE.txt 33KB
build
sbt 5KB
sbt-launch-lib.bash 5KB
sbt-config
repositories 1KB
共 78 条
- 1
资源评论
火石创造
- 粉丝: 30
- 资源: 4667
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功