Re: salesforce用的什么数据库产品呀？ - 未名空间MITBBS历史存档

国际科技财经博客移民网络热点娱乐民生时事公众号

Redian新闻

>未名空间

>Java - 爪哇娇娃

Re: salesforce用的什么数据库产品呀？

Re: salesforce用的什么数据库产品呀？# Java - 爪哇娇娃

s*c2013-04-05 07:04

1 楼

☆─────────────────────────────────────☆
kittybaby (猫猫) 于 (Thu Jul 23 11:34:11 2009, 美东) 提到:
RT
☆─────────────────────────────────────☆
HugeTailWolf (大椅巴狼·居家型) 于 (Thu Jul 23 12:49:05 2009, 美东) 提到:
谢谢猫猫mm

☆─────────────────────────────────────☆
HugeTailWolf (大椅巴狼·居家型) 于 (Thu Jul 23 20:29:34 2009, 美东) 提到:
好，一会我看看有多少人re
然后我把伪币捐到版面上来发

a*c2013-04-05 07:04

2 楼

请教高手李瑛的《谒托马斯・曼墓》这两行怎么翻译？
细雨刚停,细雨刚停
雨水打湿了墓地的钟声
谢谢！

o*i2013-04-05 07:04

3 楼

【以下文字转载自 Database 讨论区】
发信人: olivi (笨笨), 信区: Database
标题: Re: salesforce用的什么数据库产品呀？
发信站: BBS 未名空间站 (Fri Apr 5 11:34:02 2013, 美东)
最近有个项目，需要从salesforce扒数据下来，倒进我们自个的Sqlserver
大概10来万的数据
sf一次只能给你2k条，此为一ft
下来的数据，搞成json格式，有一堆嵌套，带一堆的attributes（不需要），此二ft
我转成xml格式，再传进我们的DB（我们用的java）
那个慢呀。。。。
请教版上各位大拿，以上步骤有什么可以优化的？

A*a2013-04-05 07:04

4 楼

任何人翻译都只是一个理解诗歌意境的版本。除非李瑛自己有个英文版本，任何人都可
以根据自己的理解和读者的需要来翻译。诗歌的翻译原则以意译为主。如果有这么一个
场合，一位学习中文的美国朋友，问我这诗什么意思，我可以翻一下，让他这么理解:
(I saw) A drizzle just passed,
and damped the graveyard.
(I heard) A bell just rang,
and awoke the sorrow in my heart.

【在 a***c 的大作中提到】

: 请教高手李瑛的《谒托马斯・曼墓》这两行怎么翻译？
: 细雨刚停,细雨刚停
: 雨水打湿了墓地的钟声
: 谢谢！

p*22013-04-05 07:04

5 楼

oracle

e*e2013-04-05 07:04

6 楼

A drizzle has passed, it just passed,
and damped the chime in the graveyard.

o*i2013-04-05 07:04

7 楼

二爷威武！
请看我转贴中的新问题？

【在 p*****2 的大作中提到】

: oracle

g*g2013-04-05 07:04

8 楼

扒数据可以并行，转格式可以并行。

【在 o***i 的大作中提到】

: 二爷威武！
: 请看我转贴中的新问题？

t*e2013-04-05 07:04

9 楼

用Spring Batch，典型的batch data processing. 有必要的话和spring integration
或camel并用。

o*i2013-04-05 07:04

10 楼

我也想并行呀
但是salesforce给是这样的：发个query给他，他给你回复
uery response: {
"done": false,
"nextRecordsUrl": "...",
"records": ....
...
只能循环看是不是done，用nextRecordsUrl获取更多数据呀

【在 g*****g 的大作中提到】

: 扒数据可以并行，转格式可以并行。

o*i2013-04-05 07:04

11 楼

另外，性能的最大瓶颈在Sqlserver处理XML数据上

【在 g*****g 的大作中提到】

: 扒数据可以并行，转格式可以并行。

g*g2013-04-05 07:04

12 楼

In that case, you probably want to process XML in app server. e.g. Even if
your data retrieval has to be sequential. You can read the data and send the
data to an app cluster for processing. The app cluster then send raw sql
queries to your DB for persistence.

【在 o***i 的大作中提到】

: 另外，性能的最大瓶颈在Sqlserver处理XML数据上

t*e2013-04-05 07:04

13 楼

The returns are pagnated. it is not a limitation of salesforce, but your
queries. why not narrow down data range with filters, and fire many queries
covering different ranges simultaneously.

【在 o***i 的大作中提到】

: 我也想并行呀
: 但是salesforce给是这样的：发个query给他，他给你回复
: uery response: {
: "done": false,
: "nextRecordsUrl": "...",
: "records": ....
: ...
: 只能循环看是不是done，用nextRecordsUrl获取更多数据呀

o*i2013-04-05 07:04

14 楼

这是我最初的想法了，我原来是是按照username来，a-g, h-l之类的分割，但是这个SF
的数据不知道是谁设计的，很不规范，用filter经常会漏掉一部分数据，还得测试怎么
划分才比较合理，太麻烦了
这个SF的数据库很诡异的，有一个email地址，我不带条件直接返回的结果里没有的，但
是我用where Email='the address',又有这个email的
但是今天我测试一下，返回结果又正常了

queries

【在 t*******e 的大作中提到】

: The returns are pagnated. it is not a limitation of salesforce, but your
: queries. why not narrow down data range with filters, and fire many queries
: covering different ranges simultaneously.

t*e2013-04-05 07:04

15 楼

不能partition query的话就没办法了，用spring batch至少保证不会为一两个bad
records fail整个job。

SF
，但

【在 o***i 的大作中提到】

: 这是我最初的想法了，我原来是是按照username来，a-g, h-l之类的分割，但是这个SF
: 的数据不知道是谁设计的，很不规范，用filter经常会漏掉一部分数据，还得测试怎么
: 划分才比较合理，太麻烦了
: 这个SF的数据库很诡异的，有一个email地址，我不带条件直接返回的结果里没有的，但
: 是我用where Email='the address',又有这个email的
: 但是今天我测试一下，返回结果又正常了
:
: queries