python - 抓取股票数据并保存在csv中

Question

Closed. This question needs to be more focused。它当前不接受答案。












想改善这个问题吗？更新问题，使其仅关注 editing this post的一个问题。

10天前关闭。



Improve this question




我写了代码，但现在不知道如何自动将其保存为csv格式
我的代码在这里。我的“名称”实际上是每一列的名称。因此，我收到的每个名称都应该分配给列名称。然后
1和2列，假设是名称1(点击)的No列，而No 2列应分配给名称2(回复)。
第3栏应分配给3d名称(标题)。
第4列-名称4(作者)
第5列-名称5(发表时间)

import bs4
import requests
from bs4 import BeautifulSoup
import csv
import re

page = requests.get('http://guba.sina.com.cn/?s=bar&name=sh000001')
soup = BeautifulSoup(page.text, "xml")
r = soup.find_all('tr', {'class': 'tit_tr'})
for i in r:
    children = i.findChildren("th", recursive=False)
    for child in children:
        print(child.text)

print("...................."
      ".....................")

# names 
n = soup.find_all("a", class_=" linkblack f14")
for k in n:
    print(k.get_text())

print("...................."
      ".....................")



reply = soup.find_all('span', class_='red')
for g in reply:
    print(g.get_text())  # this actually dont need to be written, dont know how to remove
print("...................."
      ".....................")
 # 1 and 2 column

for i in range(len(reply)):
    if i % 2 == 0:
        print(reply[i].get_text(), end='\t')
    else:
        print(reply[i].get_text(), end='\n')

print("...................."
      ".....................")
    #Column 3

# i wrote this to search for the user ID in this line
# <td><div class="author"><a href='/u/3856450257' title='一再无语'>一再无语</a><a target="_blank" #href="http://guba.sina.com.cn/?s=user&a=apply_vip"><i title="新浪个人认证 " class="W_ico16 approve"></i></a></div></td>
# we add 用户 at the end to each our ID
reply = soup.find_all('div', class_='author')
for kl in reply:
    print('用户'+kl.find('a').get('href')[3:])

print("...................."
          ".....................")
#column 4 

# i wrote this to search for a date. first we search for tr, then we have 5 td in our tr and w pick 4th one.
#we use get_text() to remove tags and get the plain text
tr_teg = soup.find_all('tr')
our_array = []
for item in tr_teg:
    a = item.find_all('td')
    if len(a) == 5:
        our_array.append(a)
for i in range(len(our_array)):
    print(our_array[i][4].get_text())

print("...................."
          ".....................")
    #column 5 

with open('innovators.csv', 'w', newline='') as file:
    writer = csv.writer(file)

最佳答案

首先，确保您的窗口或命令提示符支持中文字符。
类型:

chcp 936

在命令提示符下
然后尝试查看要提取的原始数据。
就我而言，我尝试使用 utf-8进行编码和解码，但是最后，这是我的窗口没有显示汉字...

关于python - 抓取股票数据并保存在csv中，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/65729188/

上一篇：powershell - 如何防止ManagementObjectNotFoundException打印

下一篇：php - 重复字段上特定于字段的错误

相关文章：

python - 如何获取 AAD 用户的 GraphUserPrincipalNameCreationContext？

python - BeautifulSoup KeyError 问题

python - 想要通过 python 中的 beautifulsoup 使用 post 方法(不想使用 selenium)来抓取具有 loadmore 按钮的整个网页

python - 多次检查 "None"- Python 中的正确方法是什么

python - __slots__ 在 Python 中是如何实现的？

python - 如何从虚拟环境中复制的 pipfile 安装依赖项？

php - 无法从数据库回显表

php - 如何使用php截取已加载网页的屏幕截图？

java - HierarchicalUriComponents - 尝试导入它时无法识别它

python - 从文本中提取特定信息

Answer 1

首先，确保您的窗口或命令提示符支持中文字符。
类型:

chcp 936

在命令提示符下
然后尝试查看要提取的原始数据。
就我而言，我尝试使用 utf-8进行编码和解码，但是最后，这是我的窗口没有显示汉字...